Конструкторы для парсинга цен и ассортимента конкурентов: что делать, если они не справляются?

Моя компания занимается парсингом сайтов в России уже более трёх лет, ежедневно мы парсим около 400 крупнейших сайтов в РФ. На выходе мы просто отдаем данные в формате Excel/CSV. Но существуют другие решения - визуальные конструкторы парсеров, правда есть и проблемы с ними...

Конструкторы для парсинга цен и ассортимента конкурентов: что делать, если они не справляются?
66
11

Занимался парсингом данных через визуальное ПО пару лет. И хочу с уверенностью сказать - такое ПО решает 95% всех задач. Использовал 2 программы: Datacol и Zennoposter. Первая(линк: https://clck.ru/HQSbA ) более простая, но есть небольшие ограничения по функционалу. Справляется с 70% задач по парсингу без знания языков программирования.
Вторая, Zennoposter(линк: https://clck.ru/HQSdp) - просто танк/ледокол/базука. Способна на get/post запросах спарсить всё что только можно, а ещё кроме этого автоматизировать кучу бизнес проессов. Делал на ней очень сложные проекты. А с небольшим знанием C#(ИМХО один из самых легких языков программирования) вы сможете намного быстрее написать нужную программу для веба чем строча весь код в блокноте!

Ответить

вы попробуйте, например, спарсить eapteka.ru с помощью визуального парсера :) и быстро поймете правду жизни. Но! совершенно согласен, что для ряда задач подойдет.

1
Ответить