7 бесплатных аналогов Screaming Frog и Netpeak Spider

Многие SEO-специалисты практически ежедневно проводят технические аудиты сайтов используя тот или иной софт для краулинга. В 90% случаев это всем известные Screaming Frog SEO Spider либо Netpeak Spider. Обе программы платные, а их стоимость начинается от £149 и $182 в год соответственно (500 бесплатных страниц, доступных в Screaming Frog в учет не берем, так как это не серьезно для более-менее крупных проектов). Согласитесь – не каждый фрилансер-сеошник может позволить себе потратить более 10 000 рублей на приобретение подобного софта.

Без сомнений, обе программы достойные, но хотелось бы дешевле, и намного дешевле. А лучше бесплатно )

Конечно, помимо Screaming Frog и Netpeak Spider существует множество других платных и бесплатных аналогичных программ для краулинга сайтов (например, RocketCrawler), однако, большинство из них либо имеет более слабый функционал, либо их поддержка и развитие прекращены по неизвестным нам причинам.

И если среди платных краулеров особых вопросов "что использовать" особо не возникает (лягушка, нетпик, ну или вебсайтаудитор на крайний случай), то бесплатные аналоги известны далеко не всем.

В данной статье мы постараемся осветить данный вопрос.

Примеры альтернативных бесплатных SEO-краулеров:

Как можно понять из выше озвученного списка, бесплатных альтернатив у платных краулеров предостаточно, однако большинство из них обладают посредственным функционалом, поэтому подробно я бы хотел остановиться лишь на одной программе из предложенных вариантов – SiteAnalyzer.

Программа визуально довольно близка со Screaming Frog SEO Spider, при этом на 80% SiteAnalyzer повторяет основной функционал "лягушки", поэтому разобраться с ее работой опытному сеошнику будет проще простого, а начинающему освоить ее не составит большого труда.

Основным отличием SiteAnalyzer от Screaming Frog является возможность хранения всех сайтов в единой базе в виде списка проектов. Таким образом, вам не нужно тратить время на сохранение проекта на диск и последующую загрузку данных с диска – вы просто выбираете нужный проект из списка и через несколько секунд получаете все его страницы с подробной информацией по каждой из них.

Визуализация ссылочных связей на графе в SiteAnalyzer способна отображать одновременно от 100 000 узлов и более, в то время как у Screaming Frog при числе от 10 000 уже возникают "тормоза" даже на мощных ПК.

Не лишним будет упомянуть, что веб-краулеров с возможностью визуализации ссылок на графе во всем мире наберется не больше, чем пальцев на одной руке, поэтому наличие данной функции в бесплатной программе особенно ценно.

Вкладка PageRank предназначена для расчета и отображения численного значения внутреннего ПейджРанк для каждой страницы сайта (рассчитывается исходя из внутренней перелинковки всех страниц сайта).

Таким образом, SEO-специалист сможет проанализировать, какие страницы получают больше всего внутренних ссылок и при необходимости скорректировать перелинковку сайта для перенаправления ссылочного веса на более важные страницы.

В программе существует возможность проверки индексации страниц в поисковой системе Яндекс через Яндекс XML.

Таким образом, после сканирования сайта вы сможете проанализировать, какой процент страниц вашего сайта находится в индексе Яндекса без использования сторонних сервисов.

Вкладка Дашборд позволяет отобразить подробный отчет о текущей оптимизации сайта на одной странице путем отображения всех найденных ошибок и указанием степени их критичности.

Помимо этих данных в отчете присутствует указание общего показателя качества оптимизации сайта, рассчитываемого по 100-бальной шкале относительно текущей степени его оптимизации. Дополнительно имеется возможность экспорта данных вкладки "Дашборд" в отчет в формате PDF.

Из прочих отличительных особенностей SiteAnalyzer можно отметить портативный формат (в виду бесплатного распространения программа не нуждается в инсталляции и работает сразу после распаковки архива, а запускается даже со сменного носителя), а также постоянное развитие программы, что как мы выяснили выше, может являться весьма весомым аргументом при выборе софта.

В ближайших версиях мы планируем не останавливаться на достигнутом и развивать продукт не менее интенсивно и продуктивно!

Следите за обновлениями!

P.S. При скачивании архива, может начать ругаться Windows Defender либо McAfee, однако не стоит чего-либо опасаться, т.к. ругаются они не на саму программу, а на Updater.exe, который служит для автоматического обновления версии и по мнению некоторых антивирусов является потенциально опасным. Мы сейчас занимаемся решением данного вопроса.