Как боты парсят ваши сайты и обходят защиту? Рассказываем в деталях

Меня зовут Максим Кульгин и моя компания xmldatafeed занимается парсингом сайтов в России порядка четырех лет. Ежедневно мы парсим более 500 крупнейших интернет-магазинов в России и на выходе мы отдаем данные в формате Excel/CSV и делаем готовую аналитику для маркетплейсов.

3939

Знавал я одних ребят, они не плохо вроде поднялись на "парсинге" (ну они правда еще там ранжирование какое-то придумали и в какую-то базу всё складывали) и результатами этого "парсинга" делились. Щас у них компания уже есть, вроде "Гугол" что ли называется, ну в общем давно они этим промышляют. 

21

Но зарабатывают они на другом, всё же.