{"id":10861,"title":"\u0417\u0430\u043f\u0443\u0441\u0442\u0438\u0442\u0435 \u043f\u0438\u043b\u043e\u0442 \u0432 \u043f\u0440\u043e\u0433\u0440\u0430\u043c\u043c\u0435 PwC Venture Hub","url":"\/redirect?component=advertising&id=10861&url=https:\/\/vc.ru\/promo\/349044-korotko-zapustit-pilot-i-poluchit-novyh-klientov-s-pwc&placeBit=1&hash=4330fcc6373e035951e6ff64a3ae572ba5f30463fe8776204270bbc0bd091c81","isPaidAndBannersEnabled":false}
SEO
Andrey Honcharyk

Кейс: как мы удалили карту сайта и улучшили посещаемость поисковым роботом Googlebot в два раза

DOM.RIA.com — это маркетплейс недвижимости. Ежедневно на сайт добавляются тысячи объявлений о продаже и аренде недвижимости. Структура сайта очень большая и сложная. Потому чтобы обеспечить свежесть контента в поиске, нужно максимально улучшать сканирование сайта поисковыми роботами.

Под термином «поисковый робот» (иногда его также называют просто роботом или «пауком») понимается любая программа, которая автоматически обнаруживает и сканирует сайты, переходя по ссылкам от страницы к странице. Основной поисковый робот Google называется Googlebot.

В чем состоит задача?

Недвижимость зависит от географии расположения. Соответственно, все страницы имеют вертикаль (Например, город -> район -> микрорайон -> станция метро и так далее). Поэтому продвигаемые каталоги не всегда находятся за три клика от главной, что, в свою очередь, затрудняет поисковым роботам находить и сканировать такие каталоги.

Изучив семантику, решили расширить структуру такими каталогами:

● недвижимость по улицам городов;

● недвижимость по переулкам городов;

● недвижимость по номеру дома в городе.

Но без проблем не обошлось. Когда каталоги уже были созданы, страницы плохо индексировались, и бот очень редко посещал их.

Для облегчения доступа поисковым роботам к страницам сайта, когда-то была создана карта сайта с ссылкой в футере и выглядела как список линков.

Карта сайта Dom.ria

Вроде бы — проблема решена, все линки находятся за 2-3 клика от главной страницы, но нет. Так как DOM.RIA большой, соответственно и карта сайта немаленькая — вмещала в себе несколько десятков страниц пагинации. Но бот упорно не хотел ходить по страницам пагинации карты сайта.

Таким образом, за 15 дней бот посетил:

  • всего 525 000 страниц улиц;

  • всего 10 000 страниц метро;

  • всего 196 000 страниц районов.

Логи посещения ботом каталогов улиц

И только 16 страниц из карты сайта бот посетил за 15 дней.

Логи посещения карты сайта ботом

Такой результат нас не устраивал — это очень мало, учитывая географию Украины.

Переосмысление внутренней перелинковки

При помощи анализа логов сервисом JetOctopus, мы знали, что чаще всего поисковый бот посещает страницы городов, областей и тому подобное. Например, за тот же период времени гуглбот посетил 1 048 000 каталогов по продаже недвижимости.

Логи посещения ботом каталогов по продаже недвижимости

Исходя из данной информации, мы решили создать мини карты сайтов на каждом каталоге по городу, включив туда урлы по улицам, районам, метро и т.д., которые плохо сканируются.

Прописали им метатеги, а также добавили ссылки на страницы, которые гугл часто посещает.

Пример того, как перелинковали страницы

При этом карту сайта удалили как бесполезную.

Как изменилось посещение ботом?

Через 15 дней после изменений, за аналогичный период (15 дней) увидели следующие результаты:

  • всего 1 398 000 страниц улиц (+266%);

  • всего 23 000 страниц метро (+230%);

  • всего 450 000 страниц районов (+230%);

Логи посещения ботом страниц улиц после эксперимента

Дальнейшие планы

В качестве бонуса хабовые страницы начали ранжироваться по ряду ключевых слов и приносить клики.

Страница в выдаче google

Значит, пользователям такие страницы интересные. Поэтому в планах сделать не просто полотно ссылок, а полноценные лендинги, которые позволят удовлетворить запросы пользователей. Для этого в планах несколько задач:

  • собрать релевантную семантику, оптимизировать под нее метатеги-

  • запилить дизайн, навигацию и так далее;
  • дополнить страницы релевантным контентом;
  • продолжить работы с внутренней перелинковкой.
0
27 комментариев
Популярные
По порядку
Написать комментарий...
Julia Nesterets

Классный кейс! С большими сайтами все не так просто. Когда у тебя есть логи под рукой, у тебя будет совсем другая динамика в SEO. Кейс это четко демонстрирует!

Ответить
3
Развернуть ветку
Andrey Honcharyk

Спасибо)

Ответить
0
Развернуть ветку
Игорь Филиппов

Материал полезный. Спасибо.

Ответить
2
Развернуть ветку
Andrey Honcharyk

Спасибо)

Ответить
0
Развернуть ветку
Michael

А пробовали настроить заголовок Last-Modified?

Ответить
1
Развернуть ветку
Andrey Honcharyk

Думали, но пока что для каталогов отложили внедрение. Внедрили только для объявлений. Но позже вернемся к этому, спасибо

Ответить
0
Развернуть ветку
Michael

Кстати, люто вы наспамили в микроразметке

Ответить
2
Развернуть ветку
Андрей Гребинчук

Это уже необходимость, чем новшество

Ответить
0
Развернуть ветку
Александр Веселов

Спасибо! Крутой кейс.

Ответить
1
Развернуть ветку
В А

Кейс для дураков! На сайте недвижимости увеличили глубину поиска, народ с радостью полез ковыряца глубже, трафик пошёл. Зачем гуглебота заставили глубже лезть в эту помойку - непонятно.

Ответить
0
Развернуть ветку
Andrey Honcharyk

Интересное мнение)))

Ответить
1
Развернуть ветку
Антон Фёдоров

Вроде бы где-то проскакивала информация, что гугл-бот на странице не воспринимает больше n-ого количества ссылок. Вроде речь о 1000 штук. И у вас карта сайта была не в xml, а в виде страницы отдельной. Может быть дело было в ограничениях на количество ссылок. А разбив на много мини-карт вы решили эту проблему? :)

Ответить
0
Развернуть ветку
Andrey Honcharyk

Скорее всего, вы имеете в виду Файлы Sitemap - там у нас все ок. А кейс именно о HTML-карте сайта.

Ответить
0
Развернуть ветку
Василий Петров

а почему он по сайтмепе не ходил, если все ок?

Ответить
0
Развернуть ветку
Andrey Honcharyk

Почему не ходил? ходил) Но хотели поскорее загнать каталоги в индекс.

Ответить
0
Развернуть ветку
YouTube Streamer Junky

Где бы взять разумный материал про микроразметку..

Ответить
0
Развернуть ветку
Евгений Кирьянов

Ответ очевиден https://schema.org/

Ответить
0
Развернуть ветку
YouTube Streamer Junky

Спасибо, капитан :)

Ответить
0
Развернуть ветку
Евгений Кирьянов

Так проблема не понятна. На официальном сайте все подробно описано, включая все схемы. Если вы не хотите разбираться, то воткните плагин - mathrankseo в wordpress умеет такое делать за вас по шаблону.

Ответить
0
Развернуть ветку
Андрей Гребинчук

Круто) перелинковка всегда отлично отрабатывала. Интересно улучшит ли это позиции страниц в "мини картах сайтов", держите в курсе 💪

Ответить
0
Развернуть ветку
Andrey Honcharyk

+

Ответить
0
Развернуть ветку
Кристина Н

Спасибо за кейс. У меня тоже как-то увеличилось количество просканированных страниц, а при детальном анализе оказалось, что гуглбот нашёл то, что не должен был найти..

Ответить
0
Развернуть ветку
Andrey Honcharyk

Да, нужно следить, чтобы не слить краулинговый бюджет впустую)

Ответить
0
Развернуть ветку
Shtolz

Интересный кейс, спасибо!

Как изменились позиции страниц, на которых были размещены мини-карты?

Ответить
0
Развернуть ветку
Andrey Honcharyk

Позиции не сильно изменились, но появилась возможность "схлопнуть" простыни перелинковки на городах без потери посещаемости бота

Ответить
0
Развернуть ветку
Анастасия Новикова

как с вами можно связаться?

Ответить
0
Развернуть ветку
Andrey Honcharyk

Написал вам в личные)

Ответить
0
Развернуть ветку

Комментарий удален

Развернуть ветку
Читать все 27 комментариев
Сквозная аналитика для B2B с длинным циклом сделки — кейс Северсталь Маркет

Северсталь Маркет — интернет-магазин металлопроката для малого, среднего и крупного бизнеса. Сайт обеспечивает полный цикл закупки продукции от заключения онлайн-договора до организации доставки на склад или промплощадку клиента.

Налог на вклады больше 1 млн рублей распространится и на тех, у кого меньшая сумма на счетах Статьи редакции

ФНС начислит налог, если прибыль по вкладу за год превысила 42,5 тысячи рублей.

Как мы сделали корпоративную культуру инструментом роста. Опыт региональной IT-компании
Оплатить любую посылку с наложенным платежом теперь можно картой на дому
Гибридный мир — гибридные меры. Тренды-2022 в ментальном здоровье на работе

Мир изменился. Мы учимся работать удаленно, а дети на дистанционном обучении прыгают у нас на голове. Работодателям надо заботиться, чтобы сотрудники не выгорели из-за стресса, и как-то гарантировать им стабильное будущее в условиях кризиса. Наконец, приходится решать, оставаться ли на удаленке, возвращаться в офис или пробовать гибридный формат.…

Управление репутацией на картах (Яндекс.Карты, Google карты, 2Gis). Полный обзор/разбор
HR своими руками: нашёл редактора рассылки за неделю без нервов (и вы тоже можете)

Исправляем типичный черезжопный HR-процесс на рынке диджитала.

«Делимобиль» заставил ждать выездную службу в –20°

В Свердловской области сломалась машина «Делимобиля». Поддержка заставила пользователей ждать пять часов на морозе.

Первый инвестиционный TikTok сериал от «Открытие Инвестиции»

Не пропустите первый сезон взрывного инвестиционного сериала в TikTok! Вас ждут 10 коротких серий о неординарном молодом инвесторе по имени Паша Баблос!

Polars: самая быстрая библиотека для обработки данных

Polars или Pandas? Кто быстрее?

null