Qrawl.io – облачный краулер сайта.
Умеет: обходить сайт, находить технические ошибки, раскладывать их по типам, рисовать графики.
- Учитывает robots.txt, meta robots, canonical, редиректы, ответы сервера и т.д.,
- Анализ метатегов и заголовков (title, description, h1-h6),
- Анализ не HTML содержимого (скрипты, стили, файлы, документы и т.д. с группировкой по URL)
- Анализ изображений (с группировкой по URL),
- Анализ структуры (и вложенности),
- Анализ ссылок (внешних и внутренних),
- Сохраняет все ссылочные связи,
- Может обрабатывать 1000+ URL в секунду, если позволит сервер, где хостится сайт.
- После сканирования подготовит сводку по ошибкам, их количеству и степени важности.
- Любой страницей отчета можно поделиться.

Сканирование до 30 000 страниц бесплатно!

Тестируйте: https://qrawl.io/