Кейс: как мы удалили карту сайта и улучшили посещаемость поисковым роботом Googlebot в два раза

DOM.RIA.com — это маркетплейс недвижимости. Ежедневно на сайт добавляются тысячи объявлений о продаже и аренде недвижимости. Структура сайта очень большая и сложная. Потому чтобы обеспечить свежесть контента в поиске, нужно максимально улучшать сканирование сайта поисковыми роботами.

Недвижимость зависит от географии расположения. Соответственно, все страницы имеют вертикаль (Например, город -> район -> микрорайон -> станция метро и так далее). Поэтому продвигаемые каталоги не всегда находятся за три клика от главной, что, в свою очередь, затрудняет поисковым роботам находить и сканировать такие каталоги.

Изучив семантику, решили расширить структуру такими каталогами:

● недвижимость по улицам городов;

● недвижимость по переулкам городов;

● недвижимость по номеру дома в городе.

Но без проблем не обошлось. Когда каталоги уже были созданы, страницы плохо индексировались, и бот очень редко посещал их.

Для облегчения доступа поисковым роботам к страницам сайта, когда-то была создана карта сайта с ссылкой в футере и выглядела как список линков.

Вроде бы — проблема решена, все линки находятся за 2-3 клика от главной страницы, но нет. Так как DOM.RIA большой, соответственно и карта сайта немаленькая — вмещала в себе несколько десятков страниц пагинации. Но бот упорно не хотел ходить по страницам пагинации карты сайта.

Таким образом, за 15 дней бот посетил:

И только 16 страниц из карты сайта бот посетил за 15 дней.

Такой результат нас не устраивал — это очень мало, учитывая географию Украины.

При помощи анализа логов сервисом JetOctopus, мы знали, что чаще всего поисковый бот посещает страницы городов, областей и тому подобное. Например, за тот же период времени гуглбот посетил 1 048 000 каталогов по продаже недвижимости.

Исходя из данной информации, мы решили создать мини карты сайтов на каждом каталоге по городу, включив туда урлы по улицам, районам, метро и т.д., которые плохо сканируются.

Прописали им метатеги, а также добавили ссылки на страницы, которые гугл часто посещает.

При этом карту сайта удалили как бесполезную.

Через 15 дней после изменений, за аналогичный период (15 дней) увидели следующие результаты:

В качестве бонуса хабовые страницы начали ранжироваться по ряду ключевых слов и приносить клики.

Значит, пользователям такие страницы интересные. Поэтому в планах сделать не просто полотно ссылок, а полноценные лендинги, которые позволят удовлетворить запросы пользователей. Для этого в планах несколько задач: