Правда про парсинг сайтов, или все интернет-магазины делают это
В этой статье я постараюсь наиболее просто рассказать о парсинге сайтов и его основных нюансах. Моя компания занимается парсингом сайтов уже более трёх лет и ежедневно мы парсим около 300 сайтов.
Максим, обращаем внимание, что описанный в вашей колонке кейс с парсингом сайта hh.ru, является прямым нарушением пункта 4.2.15 условий использования нашего сайта. Мы запрещаем использовать плагины для парсинга и копирования данных. Нам лестно, что вы совершили своеобразную «явку с повинной» и вынуждены в очередной раз предупредить ваших «заказчиков» о неизбежной блокировки в случае обнаружения парсинга.
Я знаю коллеги :) не обижайтесь, мы кстати честно сразу всех предупреждаем, что они действуют на свой страх и риск. А мы лишь помогаем собрать данные. Но право - дайте доступ к АПИ - люди ведь размещают такие заказы т.к. текущий формат просто не удобен!