{"id":4859,"title":"\u0422\u0435\u0441\u0442 \u0434\u043b\u044f \u043f\u0440\u043e\u0434\u0430\u043a\u0442\u043e\u0432: vc.ru \u0432 \u0432\u0430\u0448\u0438\u0445 \u0440\u0443\u043a\u0430\u0445","url":"\/redirect?component=advertising&id=4859&url=https:\/\/vc.ru\/special\/bettervc&hash=06e04557a2c39e6c33fa846ba405896b7fed5804f421a1db543b59166c87d7da","isPaidAndBannersEnabled":false}

Борьба с странными переходами из соцсетей и прямыми заходами

Напишу мой опыт в борьбе с накруткой негативного ПФ. Пациент https://kvartirnyj-remont.com

Начало накрутки я благополучно прозевал и крутили меня около года.

Как видите накрутка была плавной и трафик медленно падал. За позициями я не следил, каюсь :( В ноябре стало совсем грустно по трафику и я заметил накрутку ПФ, а так же тему на searchengines.

Как определил ботов

  1. Заходы из мобильных подсетей.
  2. Прямые заходы на сайт.
  3. Малая активность могут все время стоять на 1 экране и дергать мышь или тач.
  4. Посещение 1 страницы
  5. Относительно малое время посещения 15-25 сек.
  6. Нет повторности заходов.

Выбрал метод борьбы через Cloudflare

Сразу поставил капчу на весь мобильный трафик = много реальных пользователей пострадало. Процент разгадывания капчи доходил до 20%. А ведь многие могут не разгадывать и уходить.

Но, ботов это остудило. Переходы из соц сетей и других сайтов с подставленным рефером пропали. Остались только прямые заходы. И трафик пополз вверх, видимость по позициям подтянулась на 2%.

Очень сильно упала доходность по рекламе и было принято решение ослабить хватку. Стал блокировать по отдельным страницам.

Теперь, вроде, режет только ботов, во всяком случае разгадывание капчи упало до нуля. Доход по рекламе восстановился. Падение трафика и позиций не происходит. Вроде есть рост, но очень-очень медленный.

Попутно нашел много подсетей с хостингов и vps, от туда были плохие переходы. Заблокировал.

Сразу перестали работать всякие автоматические аудиты сайта. Ну они мне и не нужны. Разгадывание капчи там примерно 2-3%. Я думаю это сидящие под vpn. Может я не прав, буду рад услышать в комментариях?

Ну и напоследок самое главное: как не помешать нашим любимым роботам от гугла и яндекса. Я реализовал так:

Надеюсь что мой опыт кому-то поможет. Буду рад услышать замечания и предложения. Строго не ругайте, первый раз публикуюсь здесь.

{ "author_name": "Сергеенков Александр", "author_type": "self", "tags": [], "comments": 26, "likes": 9, "favorites": 23, "is_advertisement": false, "subsite_label": "seo", "id": 216833, "is_wide": true, "is_ugc": true, "date": "Fri, 05 Mar 2021 10:57:53 +0300", "is_special": false }
0
26 комментариев
Популярные
По порядку
Написать комментарий...
2

Желтым - неадекватный рост прямых заходов и резкое восстановление показателей сразу после ввода примитивной капчи - галка и кнопка, разгадывать ничего не надо

Ответить
0

Можете дать код, протестирую у себя?

Ответить
4

Вот самое примитивное решение

(особо не тестировал)

https://gist.github.com/zoibana/cf995cf872a24fb97847a6e6a5d2cbef

нужно вставить этот код в файл, который вызывается на всех страницах сайта

Ответить
0

Спасибо, посмотрю.

Ответить
3

У меня уже был кусок кода, отвечающий за блокировки, и я его слегка доработал., там используется очень много методов разных сторонних классов, поэтому чистого решения для этого у меня нет, даже если дам код, он у вас просто не заработает, потому что он тянет очень много зависимостей.

Общая логика такая:
1. Проверяем юзерагент на наличие строки "Android" и пустой реферер (прямые заходы с андроидов).
2. Проверяем у таких юзеров наличие в сессии (или любом другом хранилище на стороне сервера) флага (любая пометка) что пользователь прошел проверку (капчу)
3. Если юзер прошел проверку (есть флаг) - показываем сайт как обычно
4. Если юзер не прошел проверку (нет флага) - показываем страницу с капчей.
5. На странице капчи есть фраза "Пожалуйста, поставьте галочку и нажмите кнопку "войти",  POST-форма с обычной галочкой (не рекапча) "я - человек" и кнопка "войти".
6. Если пользователь поставил галочку и нажал кнопку (проверяем на стороне сервера наличие в POST-параметрах поставленной галочки ) - ставим ему флаг что он прошел проверку и следующие запросы он будет попадать сразу на шаг 3.

Ответить
1

можно еще и куку ставить на месяц.

Ответить
2

Я читал. Вы меня вдохновили поделиться опытом. Возможно коллективно придумаем как бороться эффективно.

Ответить
0

удалено. дубль

Ответить
1

Начнём с того, что редко крутят сайт, чтобы утопить. Обычно крутят свой сайт в +. А не 9 сайтов конкурентов в -. Ресурсов не хватит. 

Ответить
1

Нагуливают профиля, перед накруткой своих сайтов. Но время посещения маленькое, просмотры страниц тоже и это негативная накрутка ваших ПФ.

Ответить
0

Не согласен. Траф из соцсетей, как правило, на уровне 100% отказа, как и по ссылкам даже когда он органический. Ботовый же из соцсетей, как правило, не бывает "отказным" - ботам историю нагуливают, пытаясь создать максимально естественный профиль.
По моим наблюдениям, трафик во время выгула ботов может даже пойти на пользу. На время. До того момента, когда пойдёт скрутка из серпа с убитым last-click и ростом CTR.

Ответить
0

Да, вы правы время у бота не отказное, но в интервале 15-25 сек. Если среднее у меня на сайте 2 мин, то тогда общее среднее начинает стремиться к 1 мин. Не думаю что это пойдет на пользу сайту.

Ответить
0

не понимаю для чего это? показать Яндексу, что это кручу не я? защита от санкций? я не видел еще ни одного поста о том, что попал под фильтр из-за скрутки. +прямые заходы и переходы по ссылкам оказывают влияние в разы меньше, чем переходы из ПС.

Ответить
1

Так они и не влияют фактически, это просто артподготовка. А вот фрод с выдачи работает примерно вот так.

Ответить
0

Подготовка?) почему бы сразу не крутить из поиска? 

Ответить
0

Фингерпринты. Яндекс даже с логином, но со стёртой историей и без кук капчу показывает. А так получается живой человек, с историей и интересами.
По моим наблюдениям, даже в режиме "инкогнито" метрика визит по запросу не показывает и записывает в роботы. 

Ответить
0

Ну и я про фингерпринты. Типа кто будет так часто заходить на твой сайт из соц сетей? Да и прямые переходы в больших количествах тоже. Если это не какой-то инфоресурс... По чуть чуть да 

Ответить
0

Работает же. Не единственная. конечно, схема, но проверенная.

Ответить
0

Без данных по динамике CTR на кейс не тянет. У вас по позициям летом в 2020 была короткая просадка, всё остальное, фактически, флэт. По трафу нет характерных пиков, наоборот - плавное падение.
Иными словами, я думаю, что тут дело не в накрутках - тем более, что у вас информационник.

Ответить
0

спасибо за статью. Тоже по советам зевак, забил сначала на эти заходы. В итоге спустя полгода, все сайты потеряли позиции, те с 1 страницы улетели на 5-10 страницу. Сейчас переношу все сайты под клаудфаер, но все равно часть заходит, уже стали заходить через внутренние страницы. Борьба продолжается с ботами и по сей день. Блокирую по рефереру и подсетям

Ответить
0

Благо, что у меня проблем никаких с этим нет. Я для раскрутки сервис zenlink использую, размещение ссылок происходит на тематических площадках, так что переходы на сайт осуществляют живые люди, а не боты. Причем активная целевая аудитория, поэтому и конверсия на сайте довольно высокая. 

Ответить
0

Тоже одолели боты, было где-то 90% от всего трафика прямыми заходами (~50000 уников в сутки). Перечитал массу инструкций, но все так или иначе пришлось сильно дорабатывать. Вот здесь нашел самый быстрый и наиболее разжеванный способ блокировки: https://zahek.livejournal.com/455.html

Ответить
0

Не всегда прямые заходы это боты или люди из закладок. Сейчас открытые страницы сайта во многих мобильных приложениях, те же чаты или телеграмм, отмечаются как прямые https://ddr5.ru/pryamye-zahody-v-metrike/

Ответить
Читать все 26 комментариев
Возможности, как в корпорации, а гибкость, как у стартапа. Что думают о своей работе сотрудники DiDi

Пять представителей российского офиса компании рассказали о корпоративной культуре, рабочем дне, языковом барьере, профессиональных вызовах.

Как мы создали программный продукт для НКО, не имеющий аналогов в России, и (пока что) заработали на нём только геморрой

Это история о том, что бывает, когда одна типичная для некоммерческих организаций черта – ожидание всяческих преференций – выходит на первый план, превращается в требовательную инфантильность и рубит все отношения между заказчиком и исполнителем.
Мы почти бесплатно сделали ПО для НКО на базе Битрикс24, не имеющее аналогов в России, а вместо…

Соцсети как инструмент поиска и привлечения сотрудников в крупную компанию

В этом кейсе расскажем, как искали новых "бойцов" для работы в одном из филиалов российского провайдера цифровых услуг и сервисов через Вонтакте и Instagram и привлекли 496 заявок по цене 120 рублей за каждую.

Тренды мобильных игр в 2021 году — обзор индустрии мобильных игр

Индустрия мобильных онлайн-игр — анализ, тенденции и статистика

Пластиковый «дом будущего» должен был решить проблему нехватки жилья, а стал аттракционом в Диснейленде Статьи редакции

В конце 50-х архитекторы в США построили здание из пластмассы и «оснастили» его бытовыми предметами грядущих десятилетий — атомной микроволновкой, ультразвуковой посудомойкой, движущимися проекторами, гигантским экраном, пластиковой мебелью и посудой.

У Дома будущего Monsanto было четыре крыла Iconichouses
NASA и SpaceX отправят научный зонд для поиска жизни на спутнике Юпитера в 2024 году Статьи редакции

Запуск миссии Europa Clipper обойдётся в $178 млн — столько NASA выделяет компании Илона Маска по условиям контракта.

Как я попался на офлайн-развод в «Pure», а затем нашел актрису

В этом году я встретил на «Pure» новый для меня вид мошенничества, что стоило мне больше 2352 грн. Смысл развода состоит в том, чтобы завести на свидание в подставное кафе и вынудить оплатить счет с сильно завышенной суммой.

«Стартап-полка»: Самокат набирает производителей альтернативных продуктов

Онлайн-ритейлер Самокат совместно с Ассоциацией Производителей Альтернативных Пищевых Продуктов объявляют сбор заявок от инновационных производителей продуктов для участия в «стартап-полке» Самоката. Лучшие продукты попадут в постоянный ассортимент Самоката в раздел «Супермаркет» уже этой осенью.

Можно ли продолжать работать в той же компании после выгорания: история продакт-менеджера Тинькофф

В Тинькофф — 28 000 сотрудников, и у каждого своя история. Кто-то легко справляется с работой, и после всех задач спокойно отключается и идет отдыхать. Другим все может даваться труднее, даже сложно в уйти в отпуск — думает, «как я всё здесь брошу». Мы начинаем серию статей от лица наших сотрудников, которые делятся своим опытом: какие появлялись…

Восточная Техника успешно автоматизирует процессы управления складами на базе решения Columbus-WMS
На конференции «B Word» Илон Маск в очередной раз поменял свою позицию по биткоину

В ходе конференции где также присутствовали Джек Дорси и Кэти Вуд, Маск отметил, что он является владельцем биткойнов не только через баланс Tesla и SpaceX, но и лично владеет биткойнами, эфиром и Dogecoin.

null