{"id":14293,"url":"\/distributions\/14293\/click?bit=1&hash=05c87a3ce0b7c4063dd46190317b7d4a16bc23b8ced3bfac605d44f253650a0f","hash":"05c87a3ce0b7c4063dd46190317b7d4a16bc23b8ced3bfac605d44f253650a0f","title":"\u0421\u043e\u0437\u0434\u0430\u0442\u044c \u043d\u043e\u0432\u044b\u0439 \u0441\u0435\u0440\u0432\u0438\u0441 \u043d\u0435 \u043f\u043e\u0442\u0440\u0430\u0442\u0438\u0432 \u043d\u0438 \u043a\u043e\u043f\u0435\u0439\u043a\u0438","buttonText":"","imageUuid":""}

Как избавиться от ботов и накрутки поведенческого фактора

Накруткой поведенческих факторов занимается множество вебмастеров и плохие боты могут специально или вскользь посещать ваш сайт, портя ему время посещения, увеличивая количество отказов и глубину просмотров.

На фото мы видим, что метрика фиксирует очень много роботов

Кроме того наблюдать статистику, где кот ногу сломит, не очень приятно, я расскажу пошагово как избавиться от повышенной добротности, защитить сайт от парсеров, дорвеев, спамботов и взломщиков, снизить нагрузку на сервер и покажу наглядный пример до и после.

Как защититься от поведенческих ботов

У Вас должен быть хостинг с поддержкой php не ниже 7-й версии и немного времени на настройку программы, можете сразу регистрироваться и скачать Antibot Cloud.

На фото в колонке STOP видно сколько ботов блокировано, а поисковики легко индексируют сайт

После установки и подключению к сайту антибота уже все готово к использованию по умолчанию, но я решил немного изменить настройки и усилить защиту.

Для начала переходим в раздел правила, листаем до 3 таблицы правил "Поиск по части User-Agent с проверкой PTR" и добавляем туда поисковые системы, которые нужно пускать на сайт для индексации без проверки.

В большинстве случаев данных правил будет достаточно, но можно добавить и другие поисковые системы.

Теперь листаем до 4 таблицы "Поиск по части URL", для сайтов на WordPress рекомендуется добавить правила обведенные красным, см. фото. Также если в процессе работы антибота, нужно смотреть "Лог запросов" и если срабатывает блокировка из-за какого-то раздела или скрипта, можно добавить его в данную таблицу.

Для сайтов на WordPress данный набор правил будет идеальным.

В 5 таблице общих правил по разным параметрам, можно добавить "asname" Google LLC, все остальные правила отключить нажав на синий переключатель.

тут можно отключить вообще все правила, правило Google LLC дает доступ сервису Лайт Хаус для проверки скорости страниц.

Теперь переходим в раздел conf.php и меняем настройка как на скриншоте ниже

Рекапчу от гугла нужно включить обязательно, также не забудьте что данная функция и облачная проверка работает в платной подписке. Использовать антибот бесплатно, смысла особо нет.

После того как Вы все сделаете, можно сохранять настройки, защита будет работать.

Подозрительным посетителям нужно будет разгадать капчу

Не забудьте зарегистрироваться на сайте антибота и подключить один из тарифов, лучше брать на год, это выходит дешевле. Если сайтов много, берите тариф "Unlimit".

Пользователи, в которых программа уверена, что они не боты, проходят проверку автоматически.

Люди спокойно попадают на сайт автоматически, если не вызывают подозрения у Антибота.

Ниже я сделал скрин от 3 марта 2023 года в 16:00 где можно увидеть процент отказов и количество прямых заходов, все они настоящие от реальных людей.

Раньше был просто сумасшедший наплыв ботов с прямыми заходами. Отказы в среднем держатся до 10-12%. Также не реф. спама и прочей чепухи в статистике.

Ниже скрин без антибота за прошлый год для сравнения

Тут был большой наплыв прямых заходов и непонятных переходов с рекламы,  сайт просел по позициям. Антибот не был установлен.

Если заглянуть в вебвизор то там картина такая.

52 визит по 00:00 секунд, с чем это связано неизвестно, но таких визитов раньше были десятки.

Антибот со своей задачей справляется, подходит для любых CMS и сайтов, работает отлично. Кроме того если Вы размещаете у себя блоки РСЯ и по ним могут кликать боты, подвергая Вас риску быть заблокированным, Antibot Cloud защитит Вас на 100%.

Снизится ли доход? Нет не снизится, а вот из РСЯ Вас теперь точно не выкинут.

Как снизить нагрузку на сервер

Антибот помогает снизить нагрузку на сервер, за счет отсекания парсеров, кучи разных ботов и анализаторов сайта. Сейчас я Вам скину реальный пруф.

В один день у меня сайты на хостинге стали выдавать ошибку 503, "сервис не может обработать Ваш запрос", сайты перестали открываться. Я написал в тех. поддержку хостинга.

Выдает ошибку при открытии сайта

The server is temporarily unable to service your request due to maintenance downtime or capacity problems. Please try again later.

От: Михаила - 2023-01-19 10:29:28

Здравствуйте. Уточните, пожалуйста, на каком именно сайте данная проблема.

От: Сергей (Специалист службы поддержки) - 2023-01-19 10:35:06

было на всех

От: Михаила - 2023-01-19 10:36:44

Судя по логам, у Вас был период , когда сайтам не хватило свободной оперативной памяти. .

На сайте vykup-auto-777.ru у Вас наблюдается активность ботов парсеров

Примеры запросов ботов:

185.191.171.40 - - [19/Jan/2023:10:39:03 +0300] "GET /efxmzw-324028-Magic-ECO-Voice-Dect/ HTTP/1.0" 200 88311 "-" "Mozilla/5.0 (compatible; SemrushBot/7~bl; +http://www.semrush.com/bot.html)"

185.191.171.35 - - [19/Jan/2023:10:39:11 +0300] "GET /ahgfovbg-139307-1LN-MAN/ HTTP/1.0" 200 85641 "-" "Mozilla/5.0 (compatible; SemrushBot/7~bl; +http://www.semrush.com/bot.html)"

От: Сергей (Специалист службы поддержки) - 2023-01-19 10:50:04

Если не сложно можете посмотреть по нагрузке? Я поставил на все сайты антибот, блокирует все запросы левые. Хотелось бы узнать есть какой то толк от этого? А то они пачками прям лезут и висит сервер периодически

Михаил - 2023-01-19 15:07:12

Здравствуйте, сейчас нагрузка на процессор и оперативной памяти снизились. У вас потреблялось 1.2Гб памяти, сейчас около 200-300Мб

От: Дмитрий (Специалист службы поддержки) - 2023-01-19 15:19:15
Переписка с тех. поддержкой по вопросу зависания сервера и сайтов. Оказалось на сайт налетели тысячи ботов. 

В общем проблема с зависанием и атакой ботов была также решена. Еще бывают рассылки по формам со спамом, Антибот их также все пресекает на корню.

Заблокировано 1316 запросов от ботов. 19 людей прошло автоматически, 34 разгадали капчу, 1 промахнулся, 157 были допущены по разрешающим правилам. Далее показаны заходы поисковиков на сайт.

В итоге пользоваться статистикой стало лучше, показатели отказов, глубины просмотра и времени, стали лучше, а хостинг перестал виснуть.

Анализировать все посещения можно в логах антибота и вносить по необходимости дополнительные правила блокировки.

Например можно посмотреть с каких IP идет много запросов.

Единственное нужно понимать, что Антибот не решает проблему некачественного сайта, отказы и быстрый уход пользователя с сайта, может быть вызван отсутствием интереса к контенту. Поэтому всегда работайте над наполнением сайта также тщательно, как и над его защитой от спама.

0
3 комментария
Сергей Сметанин

а на тильду можно его установить?

Ответить
Развернуть ветку
Хурмагия

про это видео что можете сказать? https://www.youtube.com/watch?v=5FOcm6r310k&t=16s&pp=ygUNYW50aWJvdCBjbG91ZA%3D%3D

что здесь показано?

Ответить
Развернуть ветку
Михаил
Автор

Там показан тот кто это видео делал, по факту никто еще не смог его обойти

Ответить
Развернуть ветку
0 комментариев
Раскрывать всегда