Оптимизация мультиязычных и мультирегиональных сайтов

Когда компания масштабируется, создает продукты для клиентов из разных стран и продвигает сайт на широкую аудиторию, контент на сайте тоже нужно адаптировать для таких пользователей. Иначе страницу просто не найдут.

Для корректной индексации и ранжирования такого контента нужна специфическая оптимизация, которая не проводится при поисковом продвижении обычного сайта. В статье разобрал ситуации, когда требуется такая оптимизация, ее способы, распространенные ошибки и заблуждения.

Почти вся информация из статьи применима в первую очередь в Google, самой популярной поисковой системе в мире на данный момент. Также добавил информацию об аналогичных техниках для Яндекс, которая, на мой взгляд, может пригодиться только в случае оптимизации сайта иностранной компании под пользователей из России.

Александр Крыжановский, в SEO с 2011 года. Консультирую, помогаю бизнесам продвигать сайты, руковожу командами, выстраиваю и автоматизирую SEO-процессы. Работаю со стартапами, небольшими и крупными международными компаниями. ГЕО – бурж, СНГ, Россия.

Телеграм: @alexkrads

Сразу определимся: мультиязычность и мультирегиональность – разные понятия. На мультиязычном сайте публикуется контент на разных языках. Мультирегиональный может содержать контент на одном языке, но ориентированный на пользователей из разных стран. Сайт может быть одновременно и мультиязычным, и мультирегиональным.

При этом нет никаких ограничений на комбинации страна-язык. То есть страницы на английском могут таргетироваться, например, на пользователей из Великобритании, Италии и России. Подробнее – в справке Google.

Сайт может быть мультиязычным даже в рамках одной страны. Например, в Канаде население разговаривает на английском и французском, и оба языка являются официальными, а в Бельгии сразу три официальных языка: нидерландский, французский и немецкий. В Армении, несмотря на то что армянский является официальным, а русский – нет, русским владеет 70% населения.

При продвижении сайта в таких регионах следует ориентироваться на распространенные в них языки. Со стороны SEO есть 3 возможных варианта:

Разные методы оптимизации позволяют продвигать сайт как в определенных странах (мультирегиональность), под определенные языки (мультиязычность), так и сочетать одновременно мультирегиональность с мультиязычностью.

Из справки Google следует, что локализованные версии считаются дубликатами, если основной контент страницы не переведен. В идеале при адаптации должны быть переведены все страницы сайта, но это либо не всегда возможно, либо может противоречить логике бизнеса.

Например, на страницах для США и Великобритании контент обычно идентичный или почти идентичный, то же самое справедливо для страниц на французском для Франции и Канады.

Бывает и такое, что в отдельном регионе нет семантики для определенных страниц, поэтому они остаются непереведенными. Либо какие-то товары или услуги не предоставляются компанией в том или ином регионе, и оптимизировать страницы для таких регионов просто нет смысла.

Такие ситуации возникают довольно часто. SEO специалисты могут даже не замечать проблем, поскольку они сложно детектируются софтом для технических аудитов. Например, Screaming Frog найдет страницы без атрибутов hreflang или с ошибками в них, но не покажет страницы, фактически не адаптированные под целевой язык. Посетителям тяжело пользоваться таким сайтом, так как нет перевода для промежуточных страниц.

Пример

Допустим, пользователю нужно попасть на страницу товара с главной страницы сайта. Главной в этом случае будет страница с URL, соответствующим определенному языку и/или региону. В цепочке переходов покупателю нужно перейти на страницу раздела, затем категории, а уже потом на страницу товара. И все эти страницы должны быть переведены.

При создании и SEO оптимизации таких сайтов важно проверить целостность их структуры для каждого региона/языка. Каждая версия такого сайта должна иметь свою главную страницу (она может быть в папке с указанием языка, для простоты все равно будем считать ее главной), свои страницы разделов, категорий, тегов, товаров и т.д.

Все страницы должны быть связаны навигационными элементами и внутренней перелинковкой, а внутри этих цепочек не должно быть непереведенных страниц.

Также важно понимать, что хорошее ранжирование в одной стране не гарантирует таковое в другой. Продвигать сайт нужно по каждой стране отдельно. Сюда входит как оптимизация контента, так и получение ссылок на соответствующие версии сайта.

Атрибуты Hreflang – универсальный метод оптимизации мультирегиональных и/или мультиязычных сайтов, именно его рекомендует Google. Эти атрибуты сообщают поисковикам, какую версию страницы показывать посетителю из конкретного региона или для конкретного языка. Яндекс также поддерживает hreflang для различных регионов внутри России, но примеров внедрения я ни разу не видел.

Тут важно учесть, что атрибуты hreflang – не директива, а сигнал для Google. Он работает совместно с другими факторами ранжирования, поэтому часто даже с использованием hreflang в некоторых регионах ранжируются страницы, адаптированные для других регионов.

Внедрить атрибут hreflang можно тремя способами:

Независимо от способа, для каждой страницы в атрибутах должны быть указаны:

lang_code обязательно должен содержать язык, опционально в нем можно указать язык и страну. Только страну указать нельзя. Если в языке используется несколько систем письма, дополнительно указывается набор символов – например, для китайского. Наборы символов поддерживает только Google.

Язык и страна могут быть указаны только те, которые поддерживаются поисковой системой. В таблице ниже собраны стандарты ISO, поддерживаемые Яндекс и Google.

Яндекс поддерживает не все языки стандарта ISO 639-1. Список поддерживаемых приведен в справке Яндекса.

url должен содержать URL-адрес версии, соответствующей языку/региону. Для одного url указывается только один lang-code. Если создаются страницы для определенного языка с указанием региона, Google рекомендует делать еще и общую страницу для этого языка без указания страны. Ссылку на нее включают в url, как адрес канонической страницы. Для неканонических hreflang указывать не рекомендуется.

На сайте могут быть страницы, которые не переведены, но рассчитаны на аудиторию из разных стран. Например, страницы на английском для США и Канады. В таком случае тоже рекомендуется вводить hreflang.

Допустимы любые комбинации, при которых одна часть версий сайта размещена на поддоменах, а другая – на отдельных доменах или в папках основного домена.

Важно! Страницы всегда должны ссылаться друг на друга. Каждая страница должна содержать в hreflang URL всех других языковых/региональных версий, а также ссылку на саму себя.

Алгоритмы Яндекс и Google могут определять целевой язык и регион страниц вне зависимости от того, используются теги hreflang или нет, но все-таки рекомендуется указывать их явно.

Если региональные версии при продвижении сайта в нескольких странах находятся на поддоменах или в каталогах, основной домен должен быть gTLD доменом независимо от того, внедрен ли hreflang. В противном случае региональные версии размещаются на отдельном gTLD домене.

Интегрировать hreflang на сайт можно тремя способами. Для Google не имеет значения, какой вариант вы использовали – робот будет обрабатывать теги с одинаковой эффективностью. Поэтому используйте способ, который наиболее удобен для вас.

Чаще всего это самый удобный вариант.

Теги добавляются внутрь раздела (Google рекомендует добавлять в начало). Выглядят следующим образом:

Для языков, перевод на которые отсутствует на сайте, рекомендуется использовать “x-default" в качестве значения lang_code. При этом в url может быть указан адрес страницы с языком по умолчанию (например, английской версии), главной страницы или страницы с выбором языка. URL, указанный в x-default, может совпадать с URL для языковых/региональных версий страниц с указанным lang_code.

Примеры внедрения

Пример 1

Предположим, на сайте есть 4 страницы на английском для США, на английском для Великобритании, на немецком и французском языках с адресами:

При этом страница, не содержащая подкаталогов с указанием страны и/или языка предназначена для пользователей из США.

Тогда, в разделе head в html коде каждой из этих страниц должно быть указано следующее:

Пример 2

Допустим, что на сайте из Примера 1 страница на английском пользователей из США также используется для всех пользователей, перевод на язык которых отсутствует.

В таком случает в разделе head должно быть представлено:

HTTP заголовки позволяют внедрить hreflang для не HTML контента: например, для pdf-файлов. При этом их также можно использовать для HTML-страниц. Не запрещается для обычных страниц использовать HTML-теги hreflang, а для файлов – HTTP заголовки.

Согласно справке Google, HTTP-заголовки должны иметь вид

Атрибуты hreflang в HTTP-заголовках не поддерживаются Яндекс.

Пример внедрения hreflang в HTTP заголовках

Предположим, что нам требуется внедрить hreflang для pdf файлов на сайте, который, так же как и в примере для HTML заголовков, содержит несколько языковых версий. Каждый pdf файл на сайте доступен по представленным ниже урлам:

Внедрение для Apache в файле htaccess

Внедрение для Nginx

Можно использовать, как альтернативный вариант указания hreflangдля файлов, а также совместно с другими вариантами. Общий вид:

Обратите внимание, что для каждого URL должны быть перечислены все версии страницы, включая этот же URL в качестве одной из них.

В справке Google указана, на мой взгляд, более подробная информация, поэтому дублировать ее нет смысла.

Атрибуты hreflang в файлах XML Sitemap не поддерживаются Яндекс. Поддержку индексирования языковых версий страниц через Sitemap Яндекс остановил, пруфы по этой ссылке.

Пример внедрения hreflang через файлы Sitemap.xml

Содержимое файла sitemap.xml для набора url, рассмотренного в примере для HTTP заголовков:

В таблице ниже собрал все варианты внедрения атрибутов hreflang и информацию об их поддержке со стороны Яндекс и Google.

Как видно из таблицы, единственный вариант, который одновременно поддерживают и Google, и Яндекс – это HTML теги с атрибутами hreflang.

Собрал 9 самых распространенных ошибок при интеграции hreflang, из-за которых страницы могут некорректно отображаться для релевантной аудитории. Это:

Неиспользование hreflang в случаях, когда нет версии для какого-либо языка или региона, не является ошибкой. Другими словами, для разных языковых и региональных версий сайта могут быть разные наборы страниц. Более того, даже структура сайтов может различаться, но администрирование и управление такими сайтами может быть очень сложным.

Помимо геотаргетинга с атрибутами hreflang, можно указать целевой регион в URL. Такой вид геотаргетинга для мультирегиональных сайтов можно внедрить такими способами:

Достоинства и недостатки каждого метода подробно описаны в справке Google.

Если основной сайт находится на национальном домене – .ru, .fr, .ae и т.д., его региональные версии размещаются либо на других национальных доменах, соответствующих целевым странам, либо на поддоменах gTLD доменов, либо в каталогах на gTLD домене. ccTLD домены ассоциируются только с одной страной.

Для геотаргетинга поисковых систем может иметь значение слово, указанное в качестве названия поддомена или папки в URL. Об этом упоминал Джон Мюллер в видео English Google SEO office-hours from February 18, 2022 на 56:40.

В видео выше также говорится о том, что если для страниц заданы теги hreflang, они будут иметь максимальный приоритет. При этом поддомены и папки не будут иметь значения, как сигнал.

При этом в справке Google указано следующее:

Таким образом информация несколько противоречивая, но на основе сложившейся практики и рекомендаций для hreflang можно предположить, что будет оптимальным называть подпапки и/или поддомены в соответствии с форматом ISO 3166-1 Alpha 2.

Другие сигналы

Многие русскоязычные источники содержат информацию о том, что в Google Search Console (GSC) можно указать целевой регион (страну) для всего сайта, его поддомена или папки. То же самое упоминается в видео в справке Google.

Эта информация является устаревшей, сейчас данный функционал в GSC отсутствует. Пруфы вот здесь.

1. Использовать для мультиязычной/мультирегиональной локализации, на поддоменах или папках домены с кодом страны (ccTLD).

Например, если у сайта предусмотрены версии для пользователей из России, Италии и Франции, не стоит размещать его на доменах в зонах «ru», «it» или «fr». Вместо этого предпочтительнее, например, «com». Подробнее о доменах, которые Google относит к gTLD и ccTLD, можно почитать в справке Google.

Однако в приведенном примере можно использовать разные домены – например, site.ru, site.it, site.fr.

2. Использовать редиректы на языковые/региональные версии страниц, срабатывающие на основе IP адреса посетителей.

Хотя боты Google по умолчанию отправляют запросы с американских IP адресов, они также могут осуществлять обход и индексацию сайта с IP адресов, относящихся к другим странам. Если на сайте все же используются редиректы на основе IP адресов пользователей, можно определять ботов по User-Agent и отдавать им контент для всех языковых и региональных версий страниц. Подробнее о сканировании таких страниц можно почитать по этой ссылке.

При этом следует помнить, что речь идет именно о редиректах. Замена контента, доступного по одному и тому же URL в зависимости от региона посетителя, недопустима.

Яндекс в своей справке также упоминает проблему редиректов и предлагает 2 варианта решения, которые соответствуют аналогичным рекомендациям от Google:

3. Использовать URL c параметрами, содержащими язык и регион.

4. Размещать автоматически переведенный контент для версий на разных языках.

Техническая SEO-оптимизация в целом и внедрение hreflang в частности – технически сложная задача, требующая внимания ко множеству деталей. Часто владельцы мультиязычных/мультирегиональных сайтов не уделяют этому атрибуту достаточного внимания либо внедряют его с ошибками, что приводит к проблемам индексации и ранжирования сайта в поисковиках.

Если вам нужно комплексное продвижение в Рунете или за рубежом, консультация по настройке мультиязычности или другим вопросам SEO-оптимизации, пишите в Телеграм на прямую или подписывайтесь на наш новый канал.

#seo #продвижениесайтов #google #яндекс #маркетинг