Бенчмарки производительности прокси часто проваливаются по скучной причине: они измеряют то, что никто не запускает в работе. Один запрос в один поток к поисковику ничего не говорит о поведении пула, когда сорок воркеров тянут карточки товаров в девять утра.
Заслуживающий доверия бенчмарк начинается с вашей нагрузки и идет назад: тот же состав запросов, те же цели, тот же параллелизм, то же время суток и перцентили вместо средних.
Сначала нагрузка, потом инструмент
- Состав запросов: зафиксируйте долю HTML, JSON, изображений и загрузок. Пул, настроенный под мелкие JSON-вызовы, ведет себя иначе на передаче 20 МБ.
- Набор целей: пять-десять реальных доменов, а не один поисковик. У каждой цели свой TLS-стек, антибот и edge CDN.
- Параллелизм: тестируйте на рабочем значении, обычно 10–50 воркеров. Последовательный тест льстит всем провайдерам и скрывает очередь.
- Модель сессии: укажите, держит воркер sticky-сессию или ротирует на каждый запрос. Этот выбор влияет на долю успеха сильнее имени провайдера.
Чек-лист бенчмарка: шесть цифр заранее
- p50 задержки по каждой цели — типичный опыт, полезно, но недостаточно.
- p95 и p99 минимум на 500 выборках на эндпоинт — таймауты и ретраи живут в хвосте.
- Доля успеха при 10, 30 и 50 параллельных воркерах, только с верным статусом и содержимым.
- DNS-путь socks5 против socks5h: разница 20–80 мс и другой путь утечки.
- Пропускная способность на фиксированных 10–50 МБ, три повтора, чтобы отделить теплый кэш от холодной передачи.
- Churn: смены выходной IP в час в sticky-сессии. Выше заявленного срока — нарушение обещания.
Быстрое сравнение
- p50: типичная задержка и базовый оверхед, замер в своем клиенте.
- p95/p99: боль в хвосте, давление ретраев, простой воркеров.
- Доля успеха при 10–50 параллельно: реальная емкость до блокировок и очередей.
- Пропускная способность и churn: решают судьбу тяжелых передач и залогиненных сценариев.
Измерение за четыре шага
- Зафиксируйте среду: та же машина, версия клиента, регион и скрипт.
- Прогрейте и отбросьте первые 50 запросов: TLS-рукопожатия и холодные кэши искажают хвост.
- Запускайте в два суточных окна и публикуйте оба, а не выбирайте красивое.
- Повторите трижды, сообщите медиану и разделите ошибки: таймаут, 403, 407, TLS.
Частые вопросы
Почему p95 важнее p50?
p50 показывает стоимость типичного запроса. p95 показывает, что происходит с одним из двадцати, а при 50 воркерах это таймаут каждые несколько секунд. Ретраи повышают нагрузку и отодвигают хвост, сбой накапливается. Если p50 улучшился, а p95 ухудшился, пул стал хуже для автоматизации.
Сколько нужно выборок?
Не менее 500 на эндпоинт для перцентилей, больше, если цитировать p99. Для доли успеха 1 000 запросов дают примерно плюс-минус 3 процентных пункта при доверии 95% — достаточно, чтобы отличить хороший пул от плохого.
Бенчмарк дешевле, чем обнаружить отказ в девять утра в день запуска. Если нужна база для сравнения, FTProxy Residential Proxies публикует задержку и долю успеха по нодам.