Как защитить сайт от ботов и накрутки пф, держим топ 10

В данной статье Я расскажу Вам как защитить сайт от прямых заходов, спам-ботов, накрутки поведенческих факторов, краулерорв, парсинга контента, а также от ложных конверсий.

Различные боты всегда шастали по сайтам, выполняя задачи по скачиванию контента, рассылки рекламных сообщений, обновлению поисковых баз. В 2010 году поисковики стали учитывать в ранжировании поведенческие факторы и процент влияния их на выдачу неуклонно рос каждый год.

Кто не хотел продвигать честно, а таких много, стали придумывать как обмануть ПС, сначала вручную имитировали заходы на сайт, а когда этого стало мало, начали писать программы которые имитировали действия пользователи и давали поисковику сигнал, что сайт полезен.

Кроме продвижения своих сайтов, поведенческие боты могут топить конкурентов, делая вид что сайт не интересен, быстро закрывая страницу.

Если Вы никак не защищали свой сайт, то они уже у Вас есть априори, также можно понять по резкому росту посещаемости и высокой роботности в отчетах метрики. Иногда ботов на столько много, что может и хостинг подвисать и выдавать 503 ошибку. Ну про парсеры сайтов и говорить не нужно, они копируют ваш контент непрерывно

Еще бывает так, что сайт долго занимал топ 10, потом резко началось падение, без причин, в этом случае можно посмотреть отказы, количество посещений и роботность. Если увидите значительные отклонения, то наверняка у Вас проблемы с ботностью.

Не существует сейчас сайтов, которые не подвергаются атакам ботоводов, если сайт вылезает в топ 50, то на него сразу же полетит куча мусорного трафика, спам по формам обратной связи и комментариям.

В один момент нашествие ботов на сайт меня достало до печенок и я начал искать способы побороть их, прямые заходы была меньшая из бед. Я устанавливал JS скрипты, прописывал запреты в .htacces, ставил отдельно защиту на формы обратной связи, использовал claudflare, но данные решения не решили моей проблемы.

Перерыв форумы и поисковые системы я нашел универсальное решение Antibot.Cloud – это облачный сервис проверки трафика на сайте, который не пропускает подозрительных посетителей и показывает им капчу.

Пользуюсь данной системой больше 2-х лет, вот какие плюсы для себя я отметил:

1. Перестал идти спам по формам обратной связи

2. Снизились отказы

3. Снизилась роботность

4. Сайт стал увереннее держаться в топ 10

5. Снизилась нагрузка на сервер

6. При размещении рекламы в директе, не проходят боты и не скликивают бюджет, актуально при оплате за конверсии.

7. Также не прилетит бан в рекламной сети Яндекс.

8. Подключить можно на любой сайт на PHP

Переходите по ссылке и подключите защиту сайта от ботов, тестировать нужно 2-3 месяца, для получения стойкого результата.

Настраивать ничего не нужно, уже в стоке антибот работает отлично и отсеивает все виды угроз.

Результаты победы над ботами и накрутки поведенческих

От меня отцепились парсеры и грабберы контента, прекратился спам по формам и комментариям, я перестал платить за левые конверсии на сайте в директе, у меня стабилизировалась позиция в топ яндекса, перестал падать сайт под нагрузкой ботов и выдавать 503 ошибку.

Бонусом Ваш сайт не смогут анализировать программами для сео аудита и разными сервисами.

Посмотрим детально на показатели метрики. На первом скрине видим высокие процент отказов.

После настройки, отказы снизились до 10,9%. Если Ваш сайт не достаточно качественный, причиной отказов могут быть не боты, а пользователи, которые не нашли нужный контент.

Также посмотрим на роботность, которая упала более чем в 3 раза после настройки Antibota, реальные пользователи всегда смогут попасть на сайт.

Здесь можно подробно посмотреть причину блокировки, IP адрес, разрешение экрана, включен ли JavaScript и много других параметров.

Если хотите еще больше защиты, в настройках можно включить рекапку 3, которая дополнительно проверит юзера на бота и не даст напакостить на Вашем сайте.

Для начала зарегистрируйтесь и скачайте актуальную версию дистрибутива антибота, распакуйте архив с файлами в папку сайта на свой хостинг.

Существует несколько способов подключения, я расскажу о методе который использую для WordPress через PHP.

В файл Wp-config после <? добавляем строку

Обратите внимание, чтобы по путь до папки с антиботом был правильным. Также отлично работает, если строку добавить в index.php.

Плагины кэширования могут создавать проблемы в работе антибота, поэтому используйте более подробный гайд по настройке.

Боты заполонили весь рунет, особенно после появления ранжирования по поведенческим факторам и серьезно портят жизнь как молодым, так и старичковым проектам.

Месяц, другой ваш сайт может не реагировать на их наплыв, но потом резко позиции покатятся вниз, вместе с траификом. Если чувствуете, что они Вам вредят, то пробуйте данный метод, он проверен и работает на 100%.

Если Ваш сайт не подвергается серьезным DDOS атакам, можно спокойно обойтись без него, но при желании можно поставить. Антибот работает прекрасно в связке с CludFlare