Меня зовут Максим Кульгин, моя компания xmldatafeed занимается парсингом сайтов в России порядка четырёх лет. Ежедневно мы парсим более 500 крупнейших интернет-магазинов в России. Теперь делимся опытом.
Расскажите как побороли cloudflare? Даже без массового Парсинга создаёт кучу проблем.
смена fingerprint. прокси. другого решения нет. Такая муторная исследовательская работа. Замедляет парсинг, но это решается задействованием больше серверов.