Как устроен рынок прокси и как на нем заработать

Рынок прокси бурно растет в последние годы на фоне мировых событий. Обострение напряженности между странами и контроль за деятельностью в сети со стороны регуляторов способствуют стремлению пользователей к анонимности.

В 2021 году использование трафика резидентных прокси-серверов выросло на 70%, дата-центров — на 60%. Годовой доход лидеров рынка преодолел отметку в $100 миллионов. Компании расширяют штат сотрудников на 30% за год, чтобы подключать больше прокси и разрабатывать новые продукты, например, собственный софт для парсинга.

Однако это значит, что растет и конкуренция. Рынок вступил в фазу слияния и поглощения, когда крупные игроки покупают или вытесняют более слабых. При этом технический порог входа остается низким. Войти в сферу стало даже проще благодаря доступному программному и техническому обеспечению для ферм прокси. Этому свидетельствует появление множества небольших продавцов мобильных прокси в прошлом году. Новым сервисам остается только занять ниши, которые игнорируют крупные провайдеры и удержать там клиентов. Попробуем разобраться, как сейчас можно заработать на рынке прокси.

Поставщики прокси горизонтально расширяются, осваивая новые ниши и инструменты. Основное внимание уделяется выпуску API-интерфейсов для веб-скрапинга. Это позволит сервисам создать экосистему собственных продуктов, которые будут решать комплексные задачи пользователей: от обеспечения доступа и безопасности в сети, до парсинга и анализа данных.

Резидентные и датацентр прокси остаются наиболее востребованными у пользователей и занимают 95% рынка. Впрочем, набирают обороты ISP-прокси, комбинирующие статический и резидентный тип соединения — они размещены на серверах дата центров, но IP идентифицируются как адреса реальных пользователей. Несмотря на ажиотаж, мобильные прокси по-прежнему используются для узкого круга задач, по крайней мере, среди клиентов крупных провайдеров.

Давайте подробно разберем основные типы прокси, посмотрим на динамику их развития на рынке и сравним по основным параметрам: эффективности, скорости и цене.

Датацентр (корпоративные) прокси

Это протоколы, которые запускаются на серверах больших дата центров, таких как Amazon Web Services и Google Cloud Platform. Часто их используют корпорации для обеспечения безопасности внутренних сетей. Такие прокси имеют высокую пропускную способность и скорость. Однако их IP-адреса не принадлежат реальным пользователям, поэтому легко могут быть обнаружены сайтами, отслеживающими трафик. Чаще всего популярные площадки для парсинга, например, Amazon или eBay знают IP-адреса дата центров и заранее добавляют их в черный список.

Большинство датацентр прокси-серверов взимают плату только за IP-адреса, без ограничения трафика и запросов на подключение. Датацентр прокси работают быстро — скорость отклика у них в несколько раз выше, чем у резидентных или мобильных прокси — но стоят дешевле всего из-за низкой трастовости IP-адресов.

Резидентные прокси

Эти прокси-серверы используют IP-адреса реальных людей, предоставляемые интернет-провайдерами. Основное преимущество резидентных прокси — высокий уровень анонимности и редкие блокировки адресов благодаря живым трастовым IP . Кроме того, такие прокси позволяют выбрать конкретное местоположение: регион, страну и город, а также настроить таргетинг на ASN провайдеров, чтобы избежать внимания регуляторов и обойти географические ограничения в сети.

Резидентные прокси образуют огромные сети, охватывающие миллионы IP-адресов. Количество IP в пуле прокси-провайдера характеризует уровень сервиса — 100 млн адресов в премиум-сегменте или несколько тысяч у лоукостеров. Также различия проявляются в наличии дополнительных функций. Так, таргетинг на ASN остается редкой премиальной опцией. Исходя из отличий, формируется цена на прокси, обычно она выстраивается в зависимости от количества трафика в подписке, оплата только за использованные GB встречается редко.

Мобильные прокси

P2P прокси — это серверы, расположенные на смартфонах или планшетах, подключенных к мобильным сетям. Пулы мобильных прокси чаще всего меньше и значительно дороже резидентных или корпоративных, но у них самый высокий уровень анонимности в сети. Это связано с особенностями работы мобильного интернета.Сотовые операторы технически не могут выдать каждому абоненту, подключенному к интернету, статический IP-адрес. Они распределяют собственный ограниченный пул IPv4 адресов на миллионы пользователей с помощью алгоритма NAT. Поэтому на одном мобильном IP-адресе могут одновременно работать тысячи абонентов. Из-за этого блокировка любого подозрительного адреса приведет к бану множества юзеров, а потеря целевой аудитории крайне нежелательна для крупных интернет-ресурсов.

Мобильные прокси на основе USB-модемов с SIM-картами внутри c помощью специального скрипта превращаются в отдельный сервер. По сравнению с peer-to-peer сетями такая схема позволяет повысить контроль за отдельными IP-адресами и увеличить время безотказной работы прокси с ротацией по требованию. В последнее время этот тип сервисов стал востребованным у пользователей. Так, на популярном форуме BlackHatWorld появилось около 20 новых провайдеров мобильных прокси за последний год — это подтверждает тезис, что спрос на мобильные прокси растет, а на рынке все еще остались свободные ниши для новых игроков.

API на основе прокси

Эти инструменты обычно представляют собой комбинацию датацентр и резидентных прокси. Их цель — упростить работу пользователей, которым нужно собирать большие массивы данных. API-интерфейсы позволяют успешно решать комплексные задачи веб-парсинга с помощью динамической ротации IP-адресов, встроенному обходу капчи и сокрытию цифровых отпечатков в браузере. К тому же они экономят время клиентов, отправляя готовые датасеты по запросу за максимально короткий срок. Такой метод получения данных становится все популярнее, он применяется для парсинга сложных сетей, к примеру Google или Amazon.

Каждый девайс, подключенный к интернету, обладает своим собственным IP-адресом — уникальной комбинацией чисел, по которой можно отследить источник действий в сети. Например, по IP легко вычислить страну, город, интернет-провайдера устройства. Сайты могут забанить адрес в связи с подозрительной активностью или ограничить доступ к ресурсу для жителей определенных стран.

Прокси-сервер — это промежуточное звено между пользователем и сайтом. Прокси перенаправляет соединение через другие IP, позволяя замаскировать реальный адрес юзера. Прокси применяют, чтобы обходить запреты и ограничения в сети, а также для повышения конфиденциальности и безопасности веб-серфинга. Для создания прокси-серверов нужно много машин с чистыми IP-адресами. Это могут быть устройства пользователей, отдельные модемы или целые фермы.

Фермы модемов — самый дорогой способ получать прокси. Небольшая ферма мобильных прокси на 10 портов потребует вложений средств в инфраструктуру и отнимет много времени на сборку и настройку. 10 модемов, их прошивка, USB-концентратор на 10 портов, 10 сим-карт, оплаченный сервер — вместе будут стоить около 100 тыс. ₽. При этом подобные прокси можно купить у провайдера примерно по $50 за 3 месяца.

Дата центры — собственное железно на живых серверах генерирует высокие производственные мощности, которые можно использовать для создания прокси. У датацентр прокси будет высокая скорость, но их легко отследить — такие прокси используют IP-адреса больших диапазонов, поэтому сервисы банят их целыми подсетями. Трафик датацентр прокси стоит дешевле всего, а чтобы собрать и обслуживать инфраструктуру придется потратить бюджет небольшого города.

Earn app — те самые приложения для заработка денег от просмотра рекламы. Открыто продвигаются и размещаются в магазинах приложений. Earn App часто напрямую предлагают пользователям стать участниками peer-to-peer прокси-сети за небольшое вознаграждение. С их помощью добывают в основном мобильные прокси, гораздо реже резидентные — при установке приложения на компьютер. Примеры подобных приложений: AdWallet, AdMe, CashNGifts. В последнее время Google Play борется с Earn App’s и удаляет из магазина, даже если приложения честно предупреждают пользователей, что они станут частью прокси-сети.

SDK (software development kit) — это библиотека готовых решений для разработчика, в которой содержатся API, фрагменты кода, документация и другие инструменты. Они бывают скрыты внутри приложений и при установке могут превратить девайс в прокси-сервер без ведома пользователя. В основном SDK продвигаются через бесплатные ВПН или другие утилиты и редко предупреждают юзеров, что их устройства становятся частью прокси-сети. Даже нынешние лидеры рынка Bright Data, работавшие в 2013 году под брендом Luminati, были замечены в махинациях с SDK через приложение Hola VPN, что привело к пиар скандалу и ребрендингу.

Ботнет — самый «тёмный» способ фарма прокси. Это сеть зараженных устройств, передающих данные основному хосту и выполняющих его команды. Устройства могут быть любыми: ПК, планшет, смартфон, даже автомобиль с бортовым компьютером. Особенно ботнеты любят корпоративные сети: там много устройств и если преодолеть защитный барьер, можно захватить сразу несколько девайсов.

Классический IoT-ботнет состоит из десятков тысяч зараженных устройств, управление которыми происходит через C&C-сервер. В процессе распространения программа ищет IP-адреса устройств, замечает слабо защищенные и взламывает их. Вирус позволяет удаленно выполнять любые действия с использованием вычислительных ресурсов зараженных машин.

Как правило, ботнеты используются для DDoS-атак, майнинга и фишинга. Кроме того, устройства можно превратить в прокси-серверы и продавать трафик другим юзерам. Это самый дешевый и распространенный способ добычи прокси для нелегальных действий в интернете. Каждые 2-3 года полиция проводит расследования и вычисляет хакеров, запустивших вирус, но на место закрытых ботнетов быстро приходят новые.

Знать все схемы для применения прокси невозможно, а ограничиваться размытым «обеспечение анонимности и обход блокировок» не хочется. Однако можно выделить основные направления, в которых прокси полезны бизнесу. Чаще всего клиенты используют прокси-соединение для парсинга данных, анализа рекламных размещений и мониторинга эффективности маркетинговых кампаний. Подробнее со сферами использования прокси можно ознакомиться на графике.

Соответствие законам, борьба за репутацию, агрессивный маркетинг конкурентов — только часть трудностей прокси-провайдера при выходе на рынок. Создание надежной инфраструктуры требует вложения денег, а постоянная борьба за клиентов вынуждает вести активную коммуникацию на тематических площадках и закупать рекламу у инфлюенсеров.

Главная особенность дистрибуции прокси — использование даркнет форумов. Там до сих пор сидит большинство целевой аудитории, создаются коммьюнити по интересам и публикуется реклама поставщиков услуг. Чтобы провайдер прокси закрепился на форуме, ему нужно получить положительные отзывы от регулярных пользователей и потратиться на баннерную рекламу в соответствующих разделах. Так, стоимость одной рекламной публикации на BlackHatWorld начинается от 500$, а в месяц у среднего прокси-провайдера выходит около 100 размещений на разных площадках.

Еще один способ реализации — продавать прокси крупным провайдерам. Для этого не нужно вкладываться в маркетинг или постоянно развивать инфраструктуру. Чаще всего таким образом продаются мобильные прокси от небольших ферм, которые генерируют трастовые IP, и крупные компании с удовольствием берут их себе для расширения присутствия на рынке.Один из новых, интересных вариантов — встраивание частного трафика прокси в общий пул провайдера. Избыток трафика может возникнуть спонтанно, но на этом можно подзаработать. Например, Proxysell покупает все типы прокси, высчитывая стоимость за GB в зависимости от ГЕО и чистоты IP. Сервис агрегирует полученный трафик и продает оптом мировым провайдерам, а пользователи получают вознаграждение на крипто кошельки.

На этом пока всё. Если будут какие-то вопросы, пишите в комментарии. Сомневаюсь, писать вторую часть обзора или нет. Но если статья окажется популярной, расскажу как поднять инфраструктуру за 100$ и начать зарабатывать, продавая прокси.

Источники:
Poxyway Market Research 2023
Poxyway Market Research 2022
Poxyway Market Research 2021