Секрет модного e-commerce: как парсинг помог нам собрать данные с 100+ сайтов одежды

Как добыть информацию о стильной одежде примерно из 100 магазинов и собрать её в одном месте?

С помощью парсинга!

Мы в ParsingMaster сделали это для нашего клиента — одной из самых популярных e-commerce платформ в России.

Наш клиент обратился к нам с задачей: собрать данные о продуктах с более чем ста модных сайтов. Он хотел получать актуальную информацию о каждом товаре, включая все его вариации: цвета, размеры и, конечно же, скидки.

Чтобы оставаться на плаву в мире моды, нужно знать, что предлагают конкуренты, как меняются цены и какие товары становятся популярными. Поэтому клиенту нужны были данные в формате CSV, которые загружались бы на их S3 серверы. И всё это — ежедневно!

1. Настройка индивидуального парсера

Мы создали специальные парсеры, которые собирали информацию о каждом товаре: название, описание, спецификации, цену и скидки для каждого цвета и размера.

2. Передача данных

После того как парсеры начали свою работу, данные извлекались с помощью наших веб-парсеров и отправлялись клиенту с нужной частотой и в нужном формате прямо на их S3 серверы.

3. Объемы данных

Каждый день мы доставляли клиенту до 1 миллиона записей.

Клиент начал получать данные всего через несколько дней после начала нашего сотрудничества. Мы настроили мониторинг исходных сайтов, чтобы отслеживать изменения в режиме реального времени. Теперь они могли адаптировать свою стратегию, сравнивать цены и собирать информацию о популярных товарах с легкостью.

Если вы тоже хотите узнать все секреты своей отрасли и получить доступ к ценным данным — мы здесь, чтобы помочь.