Реферальный спам (referrer Spam) в продвижении сайтов

Интернет | 21-Май-2020

referrer-spam

Анализируя журнал веб-сервера Access.log за Апрель месяц, с удивлением обнаружил, что реферальный спам все еще популярен и составляет 5-15% нежелательного трафика. Но еще больше удивил факт, что такой Referrer spam отлично индексируется Яндексом и смело награждает владельцев сайтов бонусными “Иксами”.

В логах веб-сервера реферальный спам выглядит примерно так:

5.248.224.61 - - [20/Apr/2020:06:32:00 +0300] "GET / HTTP/1.0" 200 33062 "https://referrer-spam1.url/" "Mozilla/4.0 (compatible; MSIE 6.0; Windows XP)" 5.248.224.61 - - [20/Apr/2020:06:32:01 +0300] "GET / HTTP/1.0" 200 33062 "https://referrer-spam2.url/" "Mozilla/4.0 (compatible; MSIE 6.0; Windows XP)" 5.248.224.61 - - [20/Apr/2020:06:32:02 +0300] "GET / HTTP/1.0" 200 33062 "https://referrer-spam3.url/" "Mozilla/4.0 (compatible; MSIE 6.0; Windows XP)"

…

При этом запрос отсылается к сайту без фактического посещения страницы. В итоге, логи, которые попадают в открытый доступ, отлично индексируются Яндексом и добавляют ссылочную массу продвигаемому сайту. Ради любопытства подсмотрел оценку Яндекса для одного из Спам-сайтов и ссылки ведущие к нему. Рейтинг Яндекса оценил сайт в 260 иксов, а проиндексированные ссылки на сайт были из логов с Referrer . Вот так-то.

Так как один из спамеров в Referrer Access.log сильно намусорил в логах, я написал в Abuse его провайдера. Провайдер проигнорировал мое сообщение и Referrer Spam продолжает пополнять мусорный траффик к серверу, дополняя атаки хакеров, искателей уязвимостей и брутфорсеров, а также многочисленных ботов.

Что не наказуемо, то разрешено. Со спамом, в различных его проявлениях, давно никто не борется. Поэтому все тяготы противодействия возлагаются на конечного получателя спама. Вот и я, снова иду ставить фильтры в .htaccess…