Резидентские прокси: чем отличаются и когда нужны

Маркетолог запускает рекламу на пять городов и хочет проверить, что объявления показываются там, где оплачено, а посадочная открывается с региональными ценами. Из московского офиса видна только московская версия. Резидентские прокси дают взгляд из другой точки: запрос уходит в сеть через домашнее подключение в нужном городе, и сайт отвечает так, как ответил бы местному жителю.

У инструмента двойная репутация. Те же адреса используют для накруток, массовых регистраций и обхода ограничений, а часть сетей собрана из заражённых устройств. Работать с ними можно чисто. Для этого нужно понимать, откуда берутся адреса, под какие задачи они оправданы и где проходит граница.

Что такое резидентские прокси и откуда берутся адреса

Прокси-сервер пересылает ваш запрос сайту от своего имени, и сайт видит адрес прокси, а не ваш. Механика подробно описана в материале о том, как устроен прокси-сервер. У резидентского прокси адрес принадлежит обычному домашнему абоненту: интернет-провайдер выдал его квартире, а не стойке в дата-центре.

Провайдер резидентской сети этими адресами не владеет. Он договаривается с людьми, которые разрешают пропускать чужой трафик через своё устройство. Например, встраивает свой модуль в приложения, и пользователь в обмен на согласие получает версию без рекламы или платные функции бесплатно. В честной схеме участник может выйти из сети в любой момент.

Технически вы подключаетесь не к чужому устройству напрямую, а к шлюзу провайдера. В настройках указываете страну, город или оператора, шлюз подбирает подходящего участника сети и пропускает запрос через него. Для вас это обычный адрес, порт, логин и пароль в настройках скрипта или браузера.

Происхождение адресов не формальность. Минюст США закрыл сервис 911 S5, который продавал доступ к адресам миллионов домашних компьютеров. Устройства попадали в сеть через VPN-программы со встроенным вредоносом и пиратские сборки софта, а доступ покупали мошенники. Клиент такой сети гоняет трафик через чужие взломанные компьютеры, даже если его собственная задача безобидна.

Чем они отличаются от серверных, мобильных и ISP-прокси

Тип прокси определяет, каким сайт видит запрос, насколько стабильно соединение и за что вы платите.

Резидентский трафик обычно оплачивают за гигабайт, а не за адрес. Отсюда главное правило: брать домашние адреса только туда, где серверный искажает результат. Если сайт одинаково отвечает дата-центру и квартире, платить за резидентский трафик незачем.

Для каких задач резидентские прокси оправданы

Общий знаменатель законных сценариев: вам нужно увидеть то, что видит обычный посетитель в конкретном месте, и вы не нарушаете правила сайта.

• Проверка рекламы. Показываются ли объявления в оплаченных регионах, куда ведут ссылки, не подменяет ли партнёр посадочную страницу.
• Региональная выдача. Позиции вашего сайта и сниппеты конкурентов в разных городах, если поисковик учитывает местоположение пользователя.
• Тест собственного сайта. Гео-редиректы, региональные цены, наличие товаров, работа форм и платёжной страницы для посетителей из разных регионов и стран.
• Мониторинг открытых цен. Цены и ассортимент на витринах конкурентов, которые видит покупатель без входа в аккаунт.
• Защита бренда. Поиск сайтов, которые копируют ваш магазин или используют ваш товарный знак и могут показывать проверяющим с серверных адресов другую страницу.

Для регулярного мониторинга важен темп. Скрипт, который изредка открывает нужные карточки, ведёт себя как внимательный покупатель. Скрипт, который бьёт по сайту без пауз, создаёт нагрузку, и смена адресов этого не отменяет. Ставьте паузы между запросами и собирайте только то, что нужно для решения.

Часть задач решается вообще без своих прокси. Позиции по регионам снимают сервисы мониторинга выдачи: регион задаётся в настройках проекта. Цены партнёров и поставщиков часто доступны через их API или фиды. Прокси нужны там, где готового канала нет.

Где проходит граница

Законность определяет не тип прокси, а то, что вы через него делаете. Резидентский адрес не превращает запрещённое действие в разрешённое. Он меняет только точку выхода в сеть.

• Правила площадки. Если сайт запрещает автоматический сбор или ограничивает частоту запросов, смена адресов не делает сбор допустимым.
• Аккаунты. Массовые регистрации, мультиаккаунтинг вопреки правилам сервиса, накрутка отзывов, лайков и кликов по рекламе остаются нарушением с любого IP.
• Персональные данные. Сбор чужих имён, телефонов и профилей регулирует закон о персональных данных, и прокси здесь ничего не меняет. Как собирать открытые данные чисто, разобрано в материале о законном парсинге сайтов.
• Блокировки. Бизнес-задачам из списка выше не нужен доступ к ресурсам, заблокированным в России. Под такие цели прокси подбирать не стоит.

Простая проверка: если бы вам пришлось объяснять владельцу сайта, зачем вы меняете адреса, и объяснение прозвучало бы неловко, сценарий стоит пересобрать. Заведите журнал: какие сайты, как часто и зачем вы опрашиваете. Он дисциплинирует команду и пригодится, если владелец сайта задаст вопросы.

Как выбрать провайдера резидентских прокси

1. Спросите про источник адресов. Нормальный ответ: участники явно согласились, знают, что делятся каналом, и могут выйти. Молчание или обещание миллионов адресов по бросовой цене без объяснений: повод уйти.
2. Посмотрите, проверяет ли провайдер клиентов. Часть крупных сетей проводит KYC: выясняет, кто вы и зачем вам доступ, и открывает сеть только под согласованный сценарий. Неудобно, зато соседи по сети проходят тот же фильтр.
3. Проверьте гео. Страна есть у всех. Город, регион и оператор связи нужны для локальной выдачи и проверки рекламы. Точность сверьте на пробном пакете: город по IP определяют базы геолокации, и они расходятся между собой.
4. Разберитесь с сессиями. Ротация меняет адрес на каждый запрос или через интервал. «Липкая» сессия держит один адрес заданное время. Она нужна, если сценарий состоит из нескольких шагов: корзина, форма, оплата. Режимы и их подводные камни описаны в статье о ротации IP.
5. Сверьте документы и оплату. Компании нужны договор, оплата по счёту и закрывающие документы. Без них расход сложно провести в учёте.
6. Оцените кабинет. Статистика расхода по дням и по сценариям, лимиты и уведомления о перерасходе. Без этого вы не поймёте, куда ушли гигабайты, пока не придёт счёт.

Как посчитать трафик и не переплатить

Тариф за гигабайт наказывает за лишние килобайты. Прикиньте объём до покупки: вес одной страницы умножьте на число страниц и на частоту проверок. Вес страницы видно в инструментах разработчика браузера, на вкладке Network. Проверьте его с выключенным кэшем, иначе цифра окажется заниженной.

• Отключите загрузку картинок, видео и шрифтов, если вам нужны только текст и цены.
• Забирайте данные из API или товарного фида, если сайт их открыто даёт: это легче, чем страница целиком, и чище с точки зрения правил.
• Кэшируйте то, что меняется редко: справочники, категории, статичные страницы.
• Пускайте через резидентские адреса только запросы, которым они нужны. Остальное отправляйте напрямую или через серверные прокси.

Частая ошибка на старте: купить большой пакет по привлекательной цене за гигабайт, а потом выяснить, что большая часть трафика ушла на баннеры и видео. Сначала замер на реальном сценарии, потом тариф.

С чего начать

Начните с задачи, а не с покупки трафика.

1. Сформулируйте, что именно вы проверяете: рекламу, выдачу, цены или свой сайт, и в каких городах.
2. Сравните ответ сайта для серверного и домашнего адреса. Если разницы нет, резидентские прокси не нужны.
3. Возьмите пробный пакет у провайдера с понятным источником адресов и проверкой клиентов, прогоните на нём один сценарий.
4. Посчитайте трафик по реальному прогону и только потом выбирайте тариф.

Если не хочется собирать это самостоятельно, мониторинг цен, выдачи и рекламы с аккуратной работой через прокси настраивает команда Neurounit в проектах по автоматизации бизнес-процессов.