Сегодня расскажу про интересный случай решения неочевидной сеошной проблемы. Ошибка Soft 404 описана в документации, но реальное положение дел — то, как ошибка проявляла себя, отличалось от описанного в документации поведения. Это привело к тому, что решение растянулось на недели, а последствием стало выпадение нескольких продвигаемых страниц из ин…
Кейс хороший, заберу в коллекцию. Но пара моментов.
а) Тот же гуглобот может зайти и анонимно, не как официально представляющийся бот
б) Насчёт "нигде не описано" - много раз упоминал, что софт 404 - это не шутки. Сервак может отдать оптимизированную страницу без контента, а робот её словить. CMS может быть криво настроена, и отдать реальную 404 с кодом 200. Вебмастер-шутник может настроить сервер так, что один робот получает 200, другой - 302, третьему вообще 403 (Бинг-бот обычно по носу получает).
Анализ логов и тесты решают.
Виктор, спасибо за комментарий!
В случае с п.1 - да, знаю) Но видимо это происходит достаточно редко, относительно общего количества заходов бота на сайт, тк количество soft 404 за год сократилось с 30к до 100 +-. Иначе модалку пришлось бы либо совсем убирать, либо увеличивать задержку для её показа пользователю.