Что такое боты, как их выявить и как защитить от них сайт?

Всем привет, это Adlook!

Представим ситуацию: вы запустили сайт с рецептами блюд из авокадо, к вам пошел не заоблачный, но стабильный трафик от любителей ЗОЖ и ПП, и вскоре вы начали зарабатывать первые деньги на монетизации.

В один прекрасный (нет) день вы обнаружили, что просмотров рекламы и кликов по объявлениям стало ну очень много. Вы потираете руки — брошу работу в офисе и уеду на Бали! Пара дней эйфории и вдруг… у вас практически перестали показывать рекламу. А все потому, что трафик-то был не настоящий, а роботный! Кому захочется платить за рекламу, особенно по модели CPC, если большинство кликов — от бездушных ботов с нулевой конверсией? Вот и рекламодатели решили не связываться с вашим сайтом…

Представили? А теперь выдохнули — ведь это случилось не с вами.

Сегодня мы поговорим о том, какие бывают боты, какой вред они могут причинить и как с ними бороться.

Знаете ли вы? По данным на 2024 год, на долю ботов приходится 47,4% всего Интернет-трафика. А если взять весь бот-трафик за 100%, то 30% из них приходится на «плохих» ботов. О том, какие боты считаются плохими, а какие — хорошими, мы расскажем далее в статье.

Бот-трафиком называют посещение сайта кем-то, кто не является человеком. Конечно, речь не о коте, случайно наступившем лапой на клавиатуру, а именно о ботах — программах, созданных для выполнения повторяющихся действий. Многие считают, что бот-трафик — это абсолютное и безусловное зло, но это далеко не всегда так. Есть и добрые боты-помощники, без которых веб-сервисы просто не смогут работать.

Кстати, всеми любимая Алиса — тоже бот. Согласитесь, без нее наша жизнь была бы чуточку скучнее.

Итак, помимо вредоносных, существуют и полезные боты, например:

А вот этих ребят хорошо бы не подпускать к сайту на пушечный выстрел:

Именно их мы описали в начале статьи. Приходят на сайт, нажимают на рекламные объявление, прямо как настоящие люди, а сами ботами оказываются. Наносят огромный ущерб рекламодателям, впустую сливающим бюджет.

Их основная мишень — инфобизнесмены, привлекающие целевую аудиторию бесплатными «полезностями» — электронными книгами, чек-листами, планерами и списками типа «50 идей постов для вашего блога». По задумке, читатели придут в восторг от подарка и вскоре прибегут уже за платными курсами или книгами, а если нет, их контакты все равно останутся в базе, и с ними придется работать. Вот только если скачивание выполнил бот, в клиента он так и не превратится.

Их «поляна» — заполнение форм. Они добывают контактную информацию, включая адреса электронной почты и номера телефонов, а затем создают фейковые аккаунты пользователей, либо крадут чужие аккаунты и действуют от их имени. Такие программы распространяют никому не нужный, а то и опасный контент, например:

Уже из названия понятно, чем они занимаются — шпионят. Крадут данные, например, адреса электронной почты с сайтов, чат-румов, форумов, и соцсетей.

Они приходят на сайт крадут размещённый там контент — списки продуктов, прайсы — и передают конкурентам. Те, в свою очередь, размещают материалы уже на своей странице, только по заниженной стоимости.

Помните Барти Крауча-младшего, проникшего в Хогвартс под видом профессора Грюма и безнаказанно творившего там тёмные делишки? Такое ПО может по праву носить его имя, так как выдает себя за того, кем не является. И сайт просматривает, и на кнопочки нажимает; думаешь, человек, а нутро — ботское. Такие притворщики обходят меры защиты на сайте, чтобы получить доступ к сетям или системам, а иногда устраивают DDoS-атаки.

Знаете ли вы? DDoS — сокращение английской фразы «Distributed Denial of Service», дословно — «Распределенный отказ в обслуживании». Во время DDoS атаки на сервер поступает слишком много запросов из разных мест, и он на время перестает работать.

Конечно, иногда серверы могут выходить из строя по естественным причинам. Например, при выходе новой игры на веб-сайте наблюдается всплеск активности: на него заходят геймеры, которые первыми хотят опробовать новинку. И всё же всегда следует помнить о деятельности киберпреступников.

В отличие от ботов-самозванцев, создаются специально для атак на сервер. Загружаются на компьютеры ничего не подозревающих пользователей, а потом дружно нападают на сервер с целью остановить его работу. По данным компании Corero, которая как раз специализируется на защите от DDoS-атак, в среднем по Америке каждый такой инцидент обходится приблизительно в 218 тысяч долларов.

Темные двойники мониторинговых ботов. Ходят по сети, выявляют у сайтов слабые места, и сообщают о них, только не владельцам сайтов, а третьим лицам, которые используют эту информацию в своих целях.

Чтобы определить, сколько ботов посещает ваш сайт, нужно регулярно проверять сетевые запросы, которые поступают на сайт. Полная версия Google Analytics в России больше не доступна, а использовать бесплатную можно только после уведомления в Роскомнадзор, иначе получите штраф. С Яндекс Метрикой таких проблем не возникнет.

Вот основные красные флажки, указывающие на нашествие ботов:

Мы узнали мнение у эксперта, который занимается защитой от скликивания рекламы и борется с вредоносным бот-трафиком на сайтах:

Итак, вы обнаружили вредоносный трафик, но как заставить ботов обходить сайт стороной? Вот основные инструменты:

Конечно, на 100 % исключить бот-трафик на ваш сайт невозможно. Но если вы будете внимательно заниматься аналитикой сайта, использовать технические средства защиты и, что немаловажно, постоянно повышать уровень осведомленности сотрудников о проблеме, вы значительно снизите возможность серьезных атак.

А чтобы ничего не пропустить и быть в курсе последних трендов, читайте наши блоги: мы активно публикуемся на виси, составе и дзене, а также на ведем блог на собственном сайте — там вы найдете полезные материалы о маркетинге и рекламе, новости, обзоры и кейсы. Переходите по ссылкам, читайте и делитесь полезностями с коллегами и друзьями :)

С вами был Adlook. На связи!