20 млн рублей в год на парсинге сайтов. Часть 2

Меня зовут Максим Кульгин, моя компания xmldatafeed занимается парсингом сайтов в России порядка четырёх лет. Ежедневно мы парсим более 500 крупнейших интернет-магазинов в России. Теперь делимся опытом.

20 млн рублей в год на парсинге сайтов. Часть 2
4343 показа
16K16K открытий
11 репост

Странно выглядят советы противодействия парсингу от компании, которая на парсинге зарабатывает. 🤦‍♂️ Советы впрочем так себе.
Самое нормальное — пользоваться услугами компаний, специализирующихся на защите от ботов.
Если денег нет, то хотя бы прикрутить ip rate limiting на уровне веб сервера.

Ответить

Rate limiting я упомянул . А так - почему не советовать? Не вижу ничего страшного - если кому то поможет.

Ответить