Аналитика использования прокси — это умение сжать тысячи строк сырых логов запросов до нескольких чисел, которые говорят, здоров ли ваш пул, деградирует ли он или тихо ломает бизнес-процесс. У большинства команд сырьё уже есть: панели провайдера, логи скраперов, счета за трафик. Но их редко сводят в один вид, отвечающий на единственный важный вопрос: даёт ли прокси-слой успешную работу по оправданной цене?
Картина отказа предсказуема. Пул начинает отдавать мягкие блокировки вместо жёстких ошибок, успешность падает на два пункта в неделю, повторы раздувают трафик, и никто не замечает, пока клиент не спросит, почему данные трёхдневной давности. К этому моменту инциденту месяц. Восемь KPI закрывают этот разрыв: они дешевы в расчёте, прямо связаны с деньгами и надёжностью и вместе покрывают около девяноста процентов отказов в работе прокси.
Восемь KPI, сгруппированные по тому, что они защищают
- Надёжность — успешность задач и доля блокировок/капч. Успешность считает завершённые задачи к попыткам, по цели и по пулу; доля блокировок считает 403, 429 и челленджи в общем числе попыток. Вместе они отделяют «сайт изменился» от «наши личности сожжены».
- Стабильность личности — смена выходного IP и задержка p50/p95 по цели. Смена измеряет, сколько раз sticky-сессия меняет IP за час; перцентили задержки показывают хвост по каждой цели, потому что общее среднее скрывает именно тот эндпоинт, который отравляет очередь.
- Экономика — ГБ на задачу и стоимость успешной задачи. Трафик на задачу нормализует объём между типами работ, а стоимость успеха сворачивает повторы, отказы и накладные расходы в одно сравнимое между провайдерами число.
- Устойчивость — состав провайдеров/пулов и покрытие алертами. Состав показывает, какая доля объёма висит на одном пуле; покрытие — какая часть известных классов отказов реально будит человека. Оба показателя предвещают тяжесть следующего инцидента.
Чек-лист здоровья пула
- Успешность задач считать по завершённой работе, а не по HTTP 200 — страница с капчей это провал.
- Долю блокировок и капч вести как семидневный тренд по каждой цели с алертом при сдвиге более трёх пунктов.
- Смену выходного IP замерять ежечасно на sticky-сессиях; при окне в тридцать минут более двух смен в час — дефект.
- Задержку p50 и p95 хранить по цели, никогда не агрегировать глобально, сравнивать по неделям.
- ГБ на задачу пересматривать после каждого изменения политики повторов: штормы ретраев — обычная причина скачка трафика.
Краткое сравнение
- Успешность: ловит тихую функциональную деградацию цели или пула, но не объясняет причину.
- Блокировки: предупреждает за недели о качестве личностей и темпе запросов, но не видит уже оплаченные повторы.
- Стоимость успеха: разбивает иллюзию ценника и раздувание повторов, но игнорирует часы инженеров у пула.
- Покрытие алертами: вскрывает классы отказов, которые не доходят до человека, но не видит отказов, о которых вы не подумали.
Дашборд за четыре шага
- Сначала определите задачу, потом запрос: разобранная карточка товара, проверенный аккаунт, снятая цена.
- Логируйте шесть полей на попытку: время, пул, цель, выходной IP, результат, байты.
- Делите каждый график по цели и по пулу; одна слитая линия — самая частая причина неделями не замечать умирающую цель.
- Алертите по скорости изменения, а не по абсолютным значениям, и раз в неделю пятнадцать минут отвечайте на три вопроса: что сдвинулось, почему, что мы сделали.
Частые вопросы
Какой KPI внедрять первым?
Успешность задач. Это единственная метрика, прямо отражающая поставленную ценность, она дешево считается по имеющимся логам и делает все остальные KPI интерпретируемыми. Сразу после неё — доля блокировок, которая объясняет большую часть колебаний успешности.
Почему p95, а не p50?
Потому что поведение очереди решает хвост. Если пять процентов запросов идут вчетверо дольше, воркеры простаивают в ожидании отстающих, и пропускная способность падает гораздо сильнее, чем подсказывает медиана. p50 — для планирования ёмкости, p95 — для реальной боли.
Ничего экзотического: таблица логов, плановый запрос и десяток строк SQL дают семь KPI из восьми; восьмой — это решение, кого будить в два часа ночи. Если нужен пул, который уже показывает успешность, смену IP, перцентили задержки и стоимость задачи в панели, начните с резидентных прокси FTProxy и подключите остальное к своему стеку.