Настраиваем CloudFlare для фильтрации ботов
В этой статьей рассмотрим детальную настройку сервиса CloudFlare для защиты сайта от всевозможных роботов, ботов, парсеров.
В этой статьей рассмотрим детальную настройку сервиса CloudFlare для защиты сайта от всевозможных роботов, ботов, парсеров.
Настроил правила, проверил через Bertal.ru Yandex.Bot, получил ответ HTTP/1.1 403 Forbidden. Это норм? В выдаче сайт не упадет?
В правилах протокол http1 уходит под проверку, поэтому и 403. Ну а то что поддельный юзерагент яндекса поставили, от этого он яндексом не стал.