Как боты парсят ваши сайты и обходят защиту? Рассказываем в деталях
Меня зовут Максим Кульгин и моя компания xmldatafeed занимается парсингом сайтов в России порядка четырех лет. Ежедневно мы парсим более 500 крупнейших интернет-магазинов в России и на выходе мы отдаем данные в формате Excel/CSV и делаем готовую аналитику для маркетплейсов.
Комментарий недоступен
как я отмечал, надо придерживаться подхода "не навреди". Но объективная реальность такова, что парсинг находясь в правовом поле неизбежен был и будет всегда.
Согласен.
Пользы от них вообще не вижу. Я чего-то не понимаю?
Это плохо, но если ты пушистый, то конкурент - не факт. Так и живем.
Это хороший повод заниматься нормальными интерфейсами для доступа к данным. Данных становится все больше и необходимость в автоматизированной обработке постоянно возрастает. Компаниям нужно задуматься об API для доступа, чтобы не создавать лишнюю нагрузку. Защититься все равно невозможно.