Привет! На связи Максим Кульгин. Моя компания xmldatafeed.com занимается парсингом сайтов более четырёх лет. Ежедневно наши роботы обходят свыше 500 крупнейших интернет‑магазинов, что приносит прибыль ~33 млн. рублей в год. Сегодня подготовили для вас список из 30 решений для самостоятельного парсинга: плагины для браузеров, приложения, облачные се…
Я для парсинга использую a-parser https://skobelkin.ru/go/aparser При должной настройке это комбайн (выгрузка результатов в любые форматы, решения капчи, многопоточность, любые источники для парсинга)
*
А для слежки за конкурентами (например отслеживать изменения на сайтах) вполне подходит инструмент Радар от Топвизора https://skobelkin.ru/go/topvisor
*
А если наоборот нужно защититься от парсинга или левых ботов (например, поведенческих ботов, которые крутят ПФ) отлично подходит антибот https://skobelkin.ru/go/antibot . В связке с cloudflare сильно усложнит работу любому парсеру
пс. сорри за рефки, кому нужно легко загуглят по названия, но инструменты реально топ для своих целей. Сам ими пользуюсь