Презентация
серверов от Acer
До начала осталось:
Смотреть
SEO
Константин Скобеев

Кейс: как убить сайт конкурента с помощью накрутки поведенческих факторов

Дыра в Яндексе, которая позволяет атаковать и убивать позиции сайтов, все еще не закрыта.

Сегодня расскажу:

  • о неравной борьбе клиентского сайта со злодеями, которые неоднократно подводили его под санкции;

  • как из-под них выйти;
  • почему многие сайты в зоне риска;
  • как определить атаку или накрутку поведенческих факторов (ПФ) и защититься (правда ненадежно).

Весной 2020 года начались трудные дни у накрутчиков ПФ. Сайты стали массово попадать под санкции Яндекса — полная потеря позиций и трафика. Если прочитать стенания накрутчиков на черных форумах, где покупались простейшие решения для вывода сайтов, можно увидеть, что совсем простые схемы перестали работать. И это открыло портал в ад… Уже к началу лета в профессиональном сообществе стали появляться сообщения, что под санкции попали сайты, которым ни оптимизаторы, ни владельцы ПФ не крутили, но на которых точно ходили боты от сторонних накрутчиков. Одним из таких пострадавших стал клиент «Скобеев и Партнеры».

Раунд Первый: злодей отправляет клиента в нокдаун

Как это выглядело?

В конце марта 2020 года внезапно начал сильно расти поисковый трафик. Он увеличился примерно в 4 раза:

При этом посмотрим, что было с роботностью (количеством зашедших ботов — не людей — на сайт)?

Роботность взлетела с 10% (это само по себе уже красная зона) до 40-50%. Как минимум, каждый второй посетитель определялся как бот.

Чтобы определить показатель роботности у себя, сразу под графиком в Яндекс.Метрике в отчете «Источники, сводка» кликните на кнопку «Метрики» и в поиске найдите «Роботность». Так вы увидете уровень роботности по источникам.

Обратите внимание, что сайт при этом атаковали с разных сторон:

Столь агрессивная накрутка привела к полному падению позиций. Выглядело это как постепенное угасание:

Посмотрим на данные, взятые за неделю, когда был пик переходов с поиска:

В итоге безумное количество переходов с поиска по НЧ запросам, осознанно низкое время на сайте (не более секунды), высочайший уровень отказов и, как следствие, высокая роботность.

Почему мы считаем, что действовал злоумышленник?

Рассуждаем от противного, исключая две другие версии:

Версия №1. Нагул ботов. Роботы ходят по конкретному сайту не специально, а нагуливают историю куки, чтобы выглядеть естественнее. Наверное, сейчас нет сайтов где бы не ходили боты.

Аргументы против:

  1. для естественности роботы будут проводить чуть больше времени на сайте, чтобы сделать свой профиль ближе к реальным пользователям;
  2. гуляющие боты не делают статистически значимое количество переходов, а тут мы наблюдаем рост в 4 раза!

Версия №2. Оптимизаторы/клиент сами накручивают ПФ.

Аргументы против:

  1. Одна секунда на сайте, почти 100% отказов: так никто себя не накручивает;
  2. кликать себе по контекстной рекламе?

Доказательство осознанности злоумышленника:

  1. во время второй атаки злодей использует переходы по запросам с вхождением телефона конкурента. Это либо сам конкурент, либо тот, кто его подставляет;
  2. клиентский сайт атаковали после переноса (см. ниже) на другом домене.

Что делают оптимизаторы, когда видят санкции и знают, что сайт чист? Правильно, начинают переписку с Яндексом, которая, правильно, ни к чему не приводит.

Итак, злоумышленник победил :(

Раунд Второй: мы отбиваемся

Тогда был задействован запасной план.

План Б: чтобы быстро вывести сайт из-под санкций, нужно его переклеить на другой домен.

Как это делается: 301 редирект со старого домена на новый и переклейка внутри панели Вебмастера Яндекса.

Срок: от 3 дней до 3 недель.

Кажется, все прекрасно. Однако злодей продолжает отслеживать проект и наносит следующий удар.

Раунд Третий: злодей наносит ответный удар

В этот раз противник решил налить трафика не в 3-4 раза, а более чем в 10 раз! Это привело к потере позиций и почти полному (кроме роботного) падению поискового трафика:

Точка отсчета в начале графика — это условно естественный трафик до накрутки. Дальше атакует злодей.

Оцените силу накрутки — для сравнения взяли пиковую неделю атаки по НЧ запросам (ранее по ним же могло не быть ни одного перехода в неделю).

Позиции стали немедленно проседать и полностью выпали к концу декабря.

В итоге злодей празднует не только Новый год, но и свою победу!

Раунд Четвертый: новая надежда

Мы решили купить третий домен и перенести сайт туда.

Позиции начали восстанавливаться, но уже не так, как ранее. Правда, на сайте еще много работ нужно провести под YATI, поэтому допускаем, что он еще отстал и от требований Яндекса.

Вот так выглядит трафик. Бедненько? Зато честно.

Уровень роботности на приемлемом уровне:

Раунд Пятый? Пока злодей не проявился

Чего ожидать дальше? Думаем, что, если сайт будет подвергнут атаке, он снова все потеряет. Яндекс не защитит.

Кому стоит бояться?

Не всем сайтам следует бояться атак злодеев.

Особенность данного проекта — почти полное отсутствие собственного трафика и слабое развитие сайта. Когда проект пришел к нам на продвижение, позиций не было вообще. Первой атаке он подвергся тогда, когда у него естественные позиции в ТОП-10 были от силы на протяжении 2 месяцев.

Ваш сайт в зоне риска, если у него:

  • маленький собственный трафик (до 3-5 тысяч в месяц);
  • низкая вовлеченность пользователей;
  • проект еще молодой.

Почему вы можете не увидеть ботов?

Яндекс.Метрика редко может показать роботов на сайте с десятками и сотнями тысяч посетителей в месяц. Если у вас большой проект и вы подвергнитесь атаке, скорее всего, боты даже не определятся. Хотя, возможно, у нас просто мало опыта. Если у вас от 5 тысяч посетителей в день, и вы видите роботов, и, тем более, подвергаетесь атаке, отпишитесь, пожалуйста, здесь.

Подробнее о накрутке ПФ можно посмотреть:

Резюмирую

Чтобы не потерять трафик и клиентов из Яндекса:

  1. Регулярно проверяйте есть ли атаки роботов на ваш сайт с поиска или иных источников.
  2. В случае атаки пробуйте разные способы (нет идеальных) бана этих роботов.
  3. Готовьте план Б. Если домен попал под санкции, то переезжайте на другой.

Буду рад, если общими стараниями усилим этот материал. Пишите комментарии и приводите примеры.

Удачи вам в нашем нервном труде!

{ "author_name": "Константин Скобеев", "author_type": "self", "tags": [], "comments": 119, "likes": 75, "favorites": 167, "is_advertisement": false, "subsite_label": "seo", "id": 218556, "is_wide": false, "is_ugc": true, "date": "Wed, 10 Mar 2021 13:13:39 +0300", "is_special": false }
0
119 комментариев
Популярные
По порядку
Написать комментарий...

Ленинградский микроскоп

21

Здравствуйте!

Если ваш сайт продвигается в интересах пользователей, не используя каких-либо техник, направленных на обман поисковых систем, то вам не о чем волноваться, так как при разработке наших алгоритмов мы, конечно же, учитывали возможность злоумышленников повлиять на позиции того или иного сайта и минимизировали ее.

Также хочу вас заверить, что мы знаем о разных типах поведения злоумышленников, вам нет необходимости предпринимать дополнительные действия по защите сайта.

Ответить
8

Вот точно такое письмо получал 3 раза! Яндексе пох! Чем нестабильней выдача тем больше денег в Директе ! 
Тоже столкнулся по всем своим сайтам с этой проблемой, а Яндекс отвечает точно так как написано выше! 
Ничего личного только бизнес! 

Ответить
0

классика

Ответить
16

«Проблемы чёрных шерифа не волнуют» (с)

Яндексу плевать что SEO-назгулы используют накрутку чтобы мочить в песочнице органического поиска мелкого торговца. Так что портал в ад будет лишь расти. А для некоторых эта статья будет прямой инструкцией на темную сторону.

Ответить
7

"статья будет прямой инструкцией на темную сторону" - кто хотел, уже давно знают. Одним больше, одним меньше. Нового автор не открыл, но доказательно описал актуальный кошмар в Яндексе.

Ответить
0

Подскажите тем кто не знает, где такой траф купить? К меня с 14го года "потенциальные партнеры" сайты копируют превращаясь в ублюдков конкурентов, мож хоть утопить их недорого получится

Ответить
4

К сожалению Вы правы на счет того что Яндексу плевать.
Не соглашусь только с тем что это инструкция: часовой гуглеж даже со стороны спеца начального уровня позволит найти несколько методик по опусканию сайта. И это мы еще ссылочные атаки под Гугл не разбирали

Ответить
8

Если ваш сайт решили завалить, именно умышленно - ничего не поможет. Ни капчи, ни файрволы. Переезд, это по любому потеря трафика без 301, а 301 - палево нового адреса для троллей. Только немного отсрочите похороны. Ни Яша ни Google помочь не смогут. А если вы ещё и рекламируетесь, то это звиздец... Месячные бюджеты улетают за пол дня... Соответственно, клиент визжит, режут то по живому... А виноват тот, кто продвигает сайт. 

Ответить
1

Гугл от накруток не проседает, это чисто яшкина дурь

Ответить
3

А у меня есть печальный пример с Google. Всё везде проседает. Эт смотря от каких роботов. Помните, Виктор, я писал про то что можно исчерпать поисковый спрос? Это как раз оттуда. Всё было хорошо, топ по многим запросам (долго) и в итоге все рухнуло. Так то поисковикам и прицепиться не к чему, но сайт рухнул в выдаче.
Есть товарищи, которые профиля ботам прокачивают годами. Их никто не определит как роботов.... 

Ответить
0

Толково настроенного бота вообще определить нельзя, ни алгоритмически, ни вручную.
Но тут, я думаю, вопрос характера запроса. Они меняются со временем.
Скажем, мой сайт с большой статьёй про водку держал топ по этому запросу 2 года. Сейчас вылетел: там одни магазины, а у меня - статья.
Дело житейское. И повод периодически обновлять семантику. 

Ответить
1

Сделай магазин, продавай водку, win-win

Ответить
0

Ну, я в этом случае поступил радикально. Сайт изничтожил полностью, остался только файл htaccess с 301 редиректом на поддомен. На поддомене контент обновил и укрепил целевые коммерческие страницы интересными статьями под актуальные запросы.
Кажись сработало. Есть медленный рост и в google и в яндексе. 

Ответить
2

в ру Гугле об успешных атаках не слышал, а вот в боевом бурж seo и Гугл проседает :(
вот доклад на тему https://www.youtube.com/watch?v=TNZX52bH6ww

Ответить
0

Ох надеюсь

Ответить
0

Есть примеры сайтов, убитых ПФ - и сохранющих топы в Гугл.
В этом пункте я совершенно уверен.

Ответить
0

В гугле все сложнее, просто дорого выходит очень

Ответить
0

Соответственно, клиент визжит, режут то по живому... А виноват тот, кто продвигает сайт. 

Это прямо знакомо.)) Но все-таки спасти можно. Вот человек расписывает как защитился и от ботов и от скликивания https://zen.yandex.ru/media/id/5a7c18ba8139baa694017350/kak-my-zascitili-biudjety-ot-sklikivaniia-i-saity-ot-botov-602a6a63c219c97e327f5ec9

Ответить
1

Фуфел. Это против тупых накрутчиков и таких же ботов. Никто не определит хорошего бота. Есть чуваки, которые своих ботов нагуливают по много месяцев. 

Ответить
1

Не думаю, что так уж много хороших нагулянных ботов бросают на конкурентов. А базовая защита сайта от накрутки и скликивания не повредит.

Ответить
3

Фингерпринт нагуляного бота дает более сильный сигнал поисковику. В оригинале Гугла фраза была: "пользователь который открывает только ссылки топ3 ни как не влияет на ранжирование, в отличие от пользователя который дойдет и до 3-6 страницы"
Тоже самое с ботами - дольше гуляют больше стОят.
Имхо.

Ответить
0

так можно же нагуляных ботов использовать по нескольку раз) особенно, если проектов много в одном гео. сначала одним позиции подняли, потом другим

сама я в такие игрушки не играю, но знаю тех, кто этим занимается.

Ответить
7

посаны, я не сеошник но спрошу: я что мешает яндексу тупо не учитывать статистику от посещений роботов?

Ответить
6

Ну это же надо думать, зад со стула поднимать и т. д. Поэтому: «Проблемы чёрных шерифа не волнуют» (с)

Ответить
0

А как ты их отличишь от людей? Это не мой вопрос - это вопрос от поисковиков.
Наверное они это могут сделать - но могут пострадать не только боты.

Ответить
10

Просто в поддержке вебмастера работают роботы, а они своих не трогают) 

Ответить
0

хм-м, странно. Параметр "Роботность" вывели жеж

Ответить
0

В вебвизоре неплохо видно часть ботов по их графику действий! 

Ответить
0

на самом деле боты палятся на простых движениях. если сравнишь движения бота курсором и человека вебвизоре, распознаешь за пару сек. но чтобы понять это роботу, нужно обучить нейронку, отличать движения бота от движений человека. трафика настолько много, что не хватает тупо мощности все проанализировать, скорее всего. ну или им пофиг на все наши траблы.

Ответить
2

1) не все боты реально определяются, в результате, если бот идентифицирован как реальный посетитель, который при этом крайне мало времени провел на сайте - это негативный сигнал и страница опустится
2) почему учитывают ботов (хотя порой яндексоиды утверждают обратное) - это скорее вопрос к психологам :)

Ответить
1

Имхо, % роботности слабо коррелирует с пониманием Яндексом сущности роботов, но это не точно

Ответить

Ленинградский микроскоп

Константин
1

Кстати, еще не понятно, кому это нужно и у кого есть ресурсы. Простой пример: у меня висит несколько доменов, на них фактически нулевые сайты, с 1-2 страницами. И даже на них ботов гонят...тут речь про конкурентов идти в принципе не может.

Ответить
0

ну вон там на скринах "роботность" выше 70% - вполне можно считать за показатель

но яндексу виднее

Ответить
2

Потому что ребята которые накручивают или скручивают пф создают такие слепки своих ботов, что и Яндекс не всегда их отличает! Попросту Яндекс не может уверенно отсечь часть трафика, потому что не может гарантировать что это бот!

Ответить
4

Мой главный поисковик гугл, и в рот ипал я ваш ху яндекс

Ответить
4

просто забить на яшу и искать другие источники трафа. :)

Ответить
1

Бинг, рамблер.. 

Ответить
3

Альтависта, Апорт, Нигма...

Ответить
0

Факс и FIDO предлагать?

Ответить
1

Единственный верный совет из всех возможных

Ответить
3

Отличный кейс, в закладки.
Вопрос: 301-й с атакованного домена - не лишнее? На этот счёт есть пачка мнений, очень противоречивых. По вашим графикам вижу, что 301-й дурные метрики на новый домен не передал.
Как переклеивали - только общий домен или всё постранично?

Ответить
5

1) по 301 эти санкции не передаются по крайней мере в настоящее время
2) редирект был постраничный

Ответить
1

Я и по некоторым товарищам вижу что переезд и 301 не передает, но непонятно клеили ли через вебмастер или нет

Ответить
3

У меня информационный сайт, на нем безжалосно нагуливают ботов переходами с социальных сетей и прямыми заходами. С поиска боты тоже ходят, но все же не в таком количестве. Переходы с соц. сетей и прямые заходы легко отфильтровать клаудфлаером, тут я писала, как это сделать https://blog.travelpayouts.com/kak-borotsya-s-botami/ кстати этот сайт тоже вставил уже защиту от бототрафика. Боты сейчас везде, крутят группы вконтакте, просмотры в ютубе, лайки в инсте. Недавно мой сайт вдруг полюбил гугл дискавери, так у меня первая мысль была, что опять ботов налили. Однако это было по-настоящему и поведенческие были в 3 раза лучше, чем из поиска. А так трафика там мало и роботность в метрике совсем не видна.

Ответить
2

Поменяйте счетчик в Яндекс метрике. Установите счетчик через Гугл Таг Менеджер. И сам счетчик, и его номер, больные на голову накрутчики не будут  видеть. А если в коде сайта номер счетчика виден, то счетчик с Вашим номером могут куда угодно установить, и он будет работать. Хотя в настройках счетчика надо устанавливать галочку в графе "Принимать данные только с указанных адресов".
Из Таг менеджера можно запускать счетчик после загрузки страницы, и с задержкой. Можно запускать после события "скролл". Боты редко умеют скролить, реальные посетители сразу скролят. При отсутствии нашествия роботов и ботов при запуске счетчика после скролла посещаемость снижается примерно на 10%.

Ответить
0

Подскажите как запускать через тег менеджер счетчик метрики после события Load  НЕ DOMContentLoaded

Ответить
1

Если установить по этой инструкции:
https://vc.ru/dev/158627-uskoryaem-rabotu-sayta-na-etape-razrabotki-i-obgonyaem-konkurentov-v-poiske-chast-2 
то запускается после загрузки страницы после скрола

Ответить
0

Спасибо!

Ответить
0

Тем самым для метрики увеличится скорость загрузки страница и уменьшится время на сайте? Отрицательно повлияет на ПФ?

Ответить
1

На пару секунд время на сайте уменьшается. Но, посетители сайта с низкой скоростью интернета будут повторно приходить на ваш сайт, он станет комфортнее для них. Показатели скорости по speed/pagespeed/insights улучшаться, в выдаче гугл сайт лучше будет показываться.

Ответить
0

Но, посетители сайта с низкой скоростью интернета

А если счетчики в самом низу, имеет смысл?

Ответить
0

Я пробовал и вверху ставить счетчик, и внизу. Все равно он блокирует основной поток. Если ставить счетчик Яндекса с задержкой, то  его тормозящее действие сильно уменьшается.
При использовании любого метода установки с задержкой есть такая неприятность - при маленьком трафике значок счетчика загорается красным, типа счетчик не найден. Но  он все равно считает посетителей.
Можно сделать показатели pagespeed 90/99, отложив загрузку рекламных баннеров, счетчика, социальных кнопок на 1,.5 - 2,5 секунды. А First Input Delay (FID) - задержка первого ввода будет 200 мс, и надпись "Origin Summary: Согласно данным наблюдений за последние 28 дней сводная оценка всех страниц из этого источника не отвечает требованиям к основным интернет-показателям."
Сайт начинает жить двойной жизнью:
1. Вначале загружается то, что требуется для хороших показателей pagespeed, 
2. Потом загружается все остальное (реклама, счетчики, социальные кнопки, чаты и прочее.
В результате показатели скорости хорошие, а сайт плохо реагирует на действия пользователей. В  консоли инструмента разработчика гугл хром видны кучи замечаний типа: " [Violation] Added non-passive event listener to a scroll-blocking 'touchstart' event. Consider marking event handler as 'passive' to make the page more responsive", то есть "[Нарушение] Добавлен не пассивный прослушиватель событий к событию "touchstart", блокирующему прокрутку. Подумайте о том, чтобы пометить обработчик событий как "пассивный", чтобы сделать страницу более отзывчивой". В основном портят все впечатление о сайте скрипты https://yastatic.net/ - оттуда скачиваются огромные библиотеки.
Работа с пассивными прослушивателями при ускорении сайта очень сложная. Сложнее,  в разы, чем все остальное вместе взятое. Pagespeed может не указывать эту ошибку, но в консоли разработчика (вызывается в гугл хром кнопкой f12, после нее желательно обновить страницу все эти ошибки видны. 

Ответить
0

Под ботами имеются в виду хедлесс браузеры, так что там все нормально

Ответить
0

Счётчик метрики из под GTM виден 

Ответить
2

Условно позиционная война. На измор.

Ответить
2

Яндексу ботов ловить невыгодно, наоборот, с ботами рекламные бюджеты растут быстрее. 

Ответить
1

Посещаемость больше 5000 в день.
Накрутки есть. Роботов очень хорошо видно

Тут подробнее писал видно очень хорошо

Ответить
0

спасибо!
несколько уточняющих:
1) метрика видит ботов?
2) что с позициями в Я?

Ответить
2

1. Нет, метрика распознает их как людей. В отчете Роботы никаких скачков или заметных изменений нет
2. позиции в яндексе провались по всем запросам, кроме брендовых почти до нуля уже несколько лет назад. Падать куда-либо особо некуда.
Все попытки за эти годы достучаться до яндекса бесполезны. Поэтому мы полностью переключились на гугл - яндекс собирает крохи. Гугл в разы предсказуемее и адекватнее в этом плане, не реагирует на накрутки никак.

На всякий случай - сайт довольно трастовый - ему почти 20 лет, ТИЦ был более 40 тыс, ИКС сейчас порядка 2 тыс.

Ответить
0

спасибо, что подтвердили о том, что на большом трафике боты как роботы в метрике не определяются.
Скинете пациента в личку, если не какой-то секрет секрет? Хочется глянуть почему у него плохая видимость в Я, может быть там есть и другие сложности.

Ответить
0

А почему не тестили КлаудФлейр, в связке с покупкой спамных баз и функцией Argo?
Три раза делать редирект - проще уж купить дроп и на него перезалить контент, три раза редирект для нового сайта - такая себе история. А для старого вообще хуже некуда.

Ответить
3

А в чем смысл - я не понял.
Что даст CF? К вам идут псевдо-люди по пачке запросов и тут же возвращаются на выдачу. Были они на сайте или нет - уже неважно. И неважно, по какой причине получился отскок, капча развернула, сервак лежит или страница мусор.
Про дроп тоже не понял.

Ответить
1

Смысл в том, что весь бото трафик льют не домашними инструментами, есть базы, которые можно купить и отсеивать через Флару. 
Я не беру в расчет кастомные методы, когда покупают ферму на 1000 симок. Но это дорогой способ, и тоже лечится Фларой на 80% за счет капчи на мобильные. 
Про отскок уже я не понял. Клик в выдаче не учитывается поиском при отсутствии метрик входа на сайт, аналогично и Директ с Ads не тратит денег.
Дроп - это брошенный домен, который, при правильном обращении и подборе минует период "песочницы" и с первых дней может приносить трафик. 

Ответить
1

Ну вот в исходном утверждении есть ошибка.
Лить бототраф можно вполне домашними инструментами, всё решается объёмом оперативной памяти и количеством проксей. Сервер, конечно, предпочтителен, но необязателен.
Дроп - ну, в Яндекс пока смысл в его использовании под большим вопросом. Да, новореги стали хуже заходить в индекс, но лечится ли это подклейкой дропа? Я живых кейсов на эту тему не видал.

Ответить
0

Практика показала что если написать в супорт яндекса то накрутка перестает действовать и позиции восстанавливаются без переездов

Ответить
3

Интересно.  Для обогащения материала. Можете опубликовать переписку с Яндексом тут? А также скрины с определением ботов и просадку позиций. Сами запросы/сайт не нужен.

Ответить
1

Крутят с мобильных прокси? По идее крутить должны не только вас. Какие изменения в выдаче? Есть новый кто залетел? 

Ответить
1

Боты, которые видны в роботности, убираются легко cloudflare. Ниже мой скрин, их вообще стало 0%. Хотя боролся с более умными - которые не видны. Так же прикреплю мою инструкцию по борьбе.

Ответить
1

Проверил роботность на своих бизнес-сайтах =0%.
Посмотрел личный блог-поделку, роботность =40%. Вот не поверю, что это злодеи. Какому злодею он нужен был? Да просто боты ходят и долбят сайты. Мне даже безразличен трафик, заметки в блог пишу себе и друзьям поделиться.
Можете глянуть статистика открыта в нижнем колонтитуле есть Яндекс.Метрика https://morikoff.ru всю роботность под =40% видно в ней.

Ответить
0

А не пробовали в настройках фильтров в метрике изменить способ фильтрации роботов?

Ответить
2

А какой смысл метрику-то настраивать? Для ранжирования её данные не используются, используется реальная поисковая статистика с выдачи.

Ответить
1

Фильтрация роботов в Метрике только учитывает или не учитывает их присутствие в собранной статистике, но не ограничивает их присутствие на сайте. Если вы их отфильтровали в Метрике, то это не значит, что вы их не увидите в Google Analytics.

Ответить
0

""но не ограничивает их присутствие на сайте""
На сайте пусть присутствуют. Главное выбросить из статистики.
Google Analytics мне кажется проще воспринимает этих роботов.

Ответить
0

Совет сродни "Когда вас убивают или грабят - просто закройте глаза и уши".

Ответить
0

Надо было просто убрать яндекс метрику

Ответить
2

Наличие "Метрики" на накрутках ПФ не сказывается. Сайты в список попадают по другим критериям - видимости по запросу в первую очередь.
Так что ещё более умный совет - "Просто не надо лезть в топы и покупать контекстную рекламу на поиске".

Ответить
0

А как по вашему яндекс узнает что делают пользователи у вас на сайте?

Ответить
0

А ему это и не надо. Есть источник данных - Метрика, Яндекс-браузер или что-то ещё - хорошо. Нет - ваш сайт всё равно укладывается в один из паттернов, на которых училась нейросеть. Вы же как-то в зону видимости попали? - Ну и вот, стандарт сформирован.
Решающее значение имеет выдача. А для её мониторинга Яндексу метрика не нужна.

Ответить
0

У меня вот уже несколько месяцев пытаются похоронить мою статью, которая в топ-1 по очень жирному запросу. Уже откуда только не нагоняли трафик, из соц. сетей, из поиска. Каждый день было по 1к мертвых посетителей на одну статью. И она никуда не девается из топ-1. Мне просто лень придумывать капчи или какие-то другие способы решения такой проблемы, поэтому я вообще ничего с этим не делал и не планирую. Ну и я думаю, что это проблема Яндекса, а не моя.

Согласен, что
"Ваш сайт в зоне риска, если у него:

- маленький собственный трафик для своей ниши;
- низкая вовлеченность пользователей;
- проект еще молодой."

И я очень сильно сомневаюсь, что у Яндекса нет совсем никаких алгоритмов ранжирования при накрутке ботами. За 22 года, могли бы что-то сделать, поэтому лучше стремиться сделать сайт и его контент лучше, а не бороться с накрутками, которые никогда никуда не пропадут.

Ответить

Ленинградский микроскоп

Дмитрий
1

Ну, на самом деле Яндексу вообще похер на все наши сайты. Но там (еще пока) остались те, кто способен мыслить. Очевидно, что если запрос в топе, сам хозяин сайта крутить его не будет - в этом нет смысла.

Ответить
0

Хорошо, а если так?
На вход страницы вешаем код, который будет писать IP, тип браузера и операционки из user_agent каждого посетителя в БД, а так же дату и время визита. На этой же странице размещаем скрипт JS, который через 15 сек после первого входа на сайт отправит запрос в БД. Если посетитель ушел (и запрос из браузера, соответственно, на сервер не придет), то в этой строке БД ставим метку.
После визитов уже 2-х ботов получится матрица из 2-х IP, 2-х браузеров и 2-х операционок. Далее каждого посетителя проверяем на совпадение IP, браузера и операционки из этой матрицы, и если есть совпадения по 3-м параметрам, то блокируем. Через сутки крон удалит записи старше 24 часов.
Переходы по внешним URL, телефонам и e-mail отслеживать через страницу редиректа, которая будет убирать метку в БД.

Ответить
1

Для самых примитивных ботов и живых накрутчиков - пойдёт. Для обычной практики - уже бесполезно.
Да и, собственно, я отключил интернет на смартфоне, подключил опять - и вот новый ip.

Ответить
0

Да, но новый IP будет в узком диапазоне, т.к. базовая станция не будет меняться (разве что девайс с СИМками будут катать на машине по городу). Я экспериментировал с мобильником, у меня штук 5 поменялось, не больше.
Да и судя по примеру где число визитов = числу пользователей и колеблется с районе 750 штук, злодеи использовали прокси, а не девайс с мобильным эмулятором на 750 карт. Жаль скрин обрезан, но похоже что гоняли сайт по восьми запросам. Поэтому даже таким примитивным способом можно снизить нагрузку до прогона по одному запросу. 
Как минимум это даст время подумать))

Ответить
0

Обычно режется кластер, притом там даже запросы - из тех, что Вордстат не ловит. Микрочастотка.
А вот способ реализации может быть разным. И мобильные фермы, и прокси.
Вообще интересно было бы посмотреть на результаты реализации. Большинство накрутчиков не парится разнообразием во всех отношениях, от используемых стратегий до софта и харда.

Ответить
0

Как напишу дам знать)

Ответить
0

Как яндекс определяет робота ?
Как он определит например селениум, или живых людей на бирже заданий ?

Ответить
–1

юзер-агент, однотипные действия(шевеление мышкой не так, как делает человек, или повторы), использование публичных проксей, там много чего.

Ответить
2

Хорошая теория

Ответить
1

Теория - и не более того

Ответить
0

Только капча, только хардкор!
Да живые пользователи тоже пострадают, но постепенно привыкнут (но это не точно).
Как вариант - не всплывающее окно, а тупо переадресация на основной сайт (мысль в слух)
Или есть ещё варианты?

Ответить
0

А если не ставить никаких яндекс метрик, то ведь получится что никаких проблем с ботами и накрутками? У меня молодой домен, органический трафик, яндекс его выводит в поиске. Я его к яндекс не подключал, только к гугл

Ответить
0

Проблема никуда не денется. Переходы с поиска и быстрые возвраты в поиск - это негативный сигнал, плюс еще есть ряд методик как собирать ПФ через аналитику пользователей и без метрики на сайте.

Ответить
0

Да, плюс есть средние данные по больнице и ctr на поиске

Ответить
0

привет. Что может означать роботность 20% из вк?

Ответить
0

то что боты сначала заходят в ВК и потом на сайт.
Если очень много заходов с соц сети - то скорее всего атака
Если небольшое количество - то нагул ботов

Ответить
0

метрика показывает 17-20%

Ответить
0

какой % переходов с соц сетей от всех источников было до этого всплеска?

Ответить
0

доля была 15% и роб 8%
стала 20% и роб 16% - в основном вк

Ответить
0

тогда, скорее всего, просто нагул ботов, я бы не стал волноваться

Ответить
0

ок. мерси)

Ответить
0

Они чаще всего и не заходят ни в какие ВК, ОК или ФБ, это просто подставной реферер.

Ответить
0

О бото-войнах (не реклама, не мое)
https://new.thin.kiev.ua/antibot/39-plohie-zaprosy-v-metrike.html

Нашёл тут: https://www.cy-pr.com/forum/f87/ (там прям магазин бото и антибото программ)

Ответить
0

Стрёмные ПФ в таблице (((
К сожалению конкуренция, особенно у нас, очень не чистоплотная.
Удачи вам!

Ответить
0

ДД! Подскажите , пожалуйста, не сеошнику, что это может быть: 9, 16 и 24 февраля огромный рост показов страниц в ПС (более чем в 10 раз по сравнению с обычными днями). Рекламу не крутили. Это тоже какая -то накрутка? Ctr при этом падает серьезно.

Ответить
0

Показов? CTR - это соотношение числа показов к числу кликов. У гугла к примеру показы считаются когда ваш сайт показывается в топ 100 или 150. Вполне естественно, что если вы находитесь на 5-10 странице, то переходов не будет. Соответственно рост показов не гарантирует рост посещаемости сайта, но он может показать вам, над какими страницами нужно работать, чтобы дожать их в топ 10 и получить трафик.

Ответить
0

т.е. за последние пол года вы спокойно клеили сайты и все было ок? А главные страницы  старых доменов не трогали?

Ответить
0

не понял второй вопрос. Переклейка была полной с постраничными редиректами.

Ответить
0

Как так?

Ответить
0

Спасибо за материал.
А что было с Google после ваших переездов?
Спасибо!

Ответить
0

Гугл изначально был не выведен (в районе 5% от семантики), после переезда, с лагом в 3 недели позиции восстановились.
В принципе, в Гугле можно переезжать безболезненно .

Ответить
0

Вот как раз сегодня снова боты ко мне зашли блин 5000 левых ботов не критично конечно

Ответить
0

5000 ботов под управлением одного злоумышленника? Как думаете.

Ответить
0

https://botfaqtor.ru/sites-antibot/ успешно боремся с такой проблемой! На 100% ни один сервис не в состоянии защитить от ботов, но мы очень стараемся 😉 ежедневно улучшаем алгоритмы детекта ботов с 2017 года! После регистрации получите бесплатные проверки для теста ;)

Ответить
0

На 99% корректно работать не будет 

Ответить
0

лучше проверить ;)

Ответить
0

Тестили ваш сервис осенью - толку ноль. Ну то есть, видимо, ботов он фильтрует, только не тех ботов, о которых речь в статье. Поверьте, это абсолютно не те боты, против которых изначально создавался ваш сервис. А эти боты выглядят примерно так - https://d.searchengines.guru/3/387/bots__d9de0caa.png

Можете на Серче почитать длиннющую тему про это всё - https://searchengines.guru/ru/forum/1029854/page16#comment_16553429

Ответить

Комментарий удален

0

Хочется проверить вашу теорию на практике. Только не на конкурентах, а на собственном сайте. Сдается мне что это не так работает.

Ответить
0

Проверяйте. Опровергайте или подтверждайте. Поделитесь своим опытом - все получат ценность.

Ответить
0

Осень забавная штука Вебвизор. В этом году вдруг пошел трафик из Одноклассников. Просмотр действий посетителей показывает, что все они просто двигают страницы вверх-вниз и порою мышкой строго и прямолинейно. Вот с чего бы это одноклассники проснулись, раньше трафик был ноль?

Ответить

Комментарии

null