Использование прокси для парсинга - необходимость, особенно когда стоит задача спарсить по-настоящему крупный или просто достаточно защищенный сайт. Иначе всего через пару десятков страниц - Вы получите бан или капчу.
У нас на Partneroff много разделов каталога построено именно на сборе и агрегации данных с других источников, поэтому, я не по…