Часто перед SEO специалистом возникает необходимость проверить большое количество доноров на наличие ссылки и доступность этой ссылки для поискового робота (в данном случае для Google BOT). Ниже рассмотрим пример, как это сделать быстро с помощью Screaming Frog.
1. Для начала нам необходимо сформировать список беклинков для проверки. Это могут быть выгрузки с сервисов, бирж или от подрядчика.
2. Необходимо внести XPath выражения в блок Configuration - Custom - Extraction, которые будут тянуть саму ссылку, ее анкор и наличие rel в теге <a>
//a[contains(@href, 'site.ua')]/@href
//a[contains(@href, 'site.ua')]
//a[contains(@href, 'site.ua')]/@rel
site.ua - домен сайта на который была размещена ссылка
*ВАЖНО! Способом позволит обнаружить ссылки добавленные через тег <a> и без редиректов.
3. Для того что бы учитывались ссылки которые добавлены в блоках с использованием JavaScript рекомендуется включить рендеринг с указанием бота:
Помимо этого указываем общего User Agent для скана:
4. На следующем этапе нам необходимо добавить наши беклинки в Screaming Frog с помощью Mode - List - Upload и запустится сканирование.
5. Результат будет сформирован в блоке Custom Extraction
Результат по URL:
Результат по Анкорам:
Результат по Rel:
Данный способ подходит для быстрой проверки большого списка размещенных ссылок.