Google из-за стороннего спамера забанил vc.ru Статьи редакции
История о хорошем способе подставить любой сайт. И решение проблемы пока не найдено.
В октябре прошлого года несколько наших клиентов написали нам, что результаты рекламных кампаний по их счётчику оказались на порядки скромнее тех данных, что мы предоставили со своей стороны. Выглядело всё так, будто реферер терялся по пути на клиентский сайт или клиентская Analytics вообще не видела переходов от нас.
Первым делом мы начали сетовать на HTTPS — может быть, мы неверно что-то настроили и браузеры обрезают реферер из-за этого? Оказалось, что всё окей, все наши тестовые переходы засчитывались один к одному. Мы экспериментировали с разными тестами, а я решил погуглить — может быть, кто-то ещё сталкивался с подобной проблемой.
И очень неожиданно наткнулся на статью с инструкцией о том, как заблокировать реферальный спам с домена vc.ru на каком-то сайте.
Что?! Какой реферальный спам?
Для владельцев сайтов с установленной Google Analytics это выглядит, будто бы vc.ru генерирует фейковые переходы на их сайт, засоряя статистику и привлекая внимание к своей странице.
Оказалось, что ещё в феврале мы написали про некоего Виталия Попова, у которого Google решила отобрать домен, который тот использовал для реферального спама. И, видимо, Виталий начал рассылать спам, подставляя домен vc.ru со ссылкой на статью про него.
А Google спустя некоторое время перестал отображать во всех аккаунтах Analytics переходы c vc.ru.
Вместе с этим мы также попали в спам-листы Piwik, а я нашёл упоминания vc.ru во многих репозиториях на GitHub со скриптами, защищающими от реферального спама. Вместе с этим начались проблемы с доставкой почты с домена vc.ru, некоторые получатели расценивали письма как спам. Но самое главное — из-за того, что Google Analytics является стандартом де-факто для измерений результативности рекламных кампаний, наши клиенты не видят в нём переходы от нас.
С аналогичной проблемой сталкивались The Next Web и Motherboard.Vice — но я не знаю, как решилась проблема у них.
Сейчас мы пытаемся справиться с проблемой, используя UTM-метки, но это не панацея — по каким-то причинам метки не учитываются аналитикой, когда трафик проходит через кликовый трекер (AdFox, AdRiver или Doubleclick).
Мы обратились в компанию Google по всем каналам, но последний ответ был примерно таким: «мы будем продолжать блокировать домен до тех пор, пока есть реферальный спам, можем вернуться к обсуждению через несколько месяцев».
¯\_(ツ)_/¯
Ребятки из vc.ru, скорее всего вас утешит тот факт, что вы не одни. Домены наших изданий вносились в спам где только можно, мы получали постановления о блокировки по судебному решению, от Роскомнадзора за статью о самодельной пиротехнике, на нас оставляли крайне негативные отзывы ребята которые получили за 10к руб. «всего 800» переходов. За 6 лет мы от какой только херни не страдали. И личные угрозы и государственные халатности и обозлённые клиенты с читателями.
Но мы живы и уверен что и вы выживете.
А тут есть момент, касательно гугла. Как то у нас появилось в веб-мастере предупреждение о том, что мы пытаемся манипулировать поисковой системой с помощью ссылок. Речь шла о статье, которая являлась подборкой статей с наших ресурсов. Гугл предложил либо ссылки закрыть, либо мы схватим фильтр. Ссылки мы конечно закрыли и переотправляли страницу на проверку. Нам выдали фильтр. За 4 дня мы написали почти 200 обращений в гугл и даже нашли туповатый повод для досудебного обращения. Фильтр убрали. Думаю просто потому, что кто то вручную сделал то, с чем налажал алгоритм фильтра.
У меня ситуация интереснее, и после разнообразных попыток исправить или улучшить, я в-общем решил что не жили богато, нефиг и начинать :)
Но идеи поискать норм. специалиста со знанием требований поисковиков и умением претворять их в жизнь с помощью php/perl массовых операций над контентом сайта, меня периодически посещают ... Кстати, была одна из причин начала активности на vc - но здесь все так увлечены намазыванием миллионов на миллиарды, что скорее всего я услугу "Идите Вы к черту со своими конфетками", как в том анекдоте :)