プロキシプール管理の差が、静かに劣化する仕組みと、顧客が気づく前に警報を上げる仕組みを分けます。プールの質は稼働中最悪のIPで決まります。腐ったエグジット1つがジョブ全体を汚染し、健常でも遊んでいるIPは請求額だけ膨らませます。

本稿では運用ループ全体を扱います:死活監視、スコアリング、クールダウン、ローテーション方針、失敗の帰属。

プール管理の4本柱

  • 常時の死活監視:バックグラウンドワーカーが数分ごとに全IPの接続レイテンシ・TLSハンドシェイク・DNSを確認し、ジョブより先に障害を検知。
  • 死と病みの分離:死は接続不可、病みは接続できるがエラーやキャプチャ。対応はまったく別。
  • 感覚ではなくスコア:成功率・レイテンシ・最終BANからの実スコアで振り分け。
  • 全レスポンスで帰属記録:リクエスト毎にエグジットIPを記録し、失敗に「どのIP・どのエラー・何回目」で答えられるように。

運用チェックリスト

  1. 計画的にプローブ:生死フラグではなくレイテンシのパーセンタイルを保存。
  2. 失敗を分類:死は廃止審査、病みはクールダウン後に再テスト。
  3. 3指標でスコア化:直近N件の成功率、p95レイテンシ、最終BANからの経過時間。
  4. スコアでルーティング:重要トラフィックは閾値以上のみ。探索ジョブは未知IPも試してスコアボードに学ばせる。
  5. クールダウンは分単位でなく時間単位。累犯は廃止し隔離ログに記録。

IP状態の比較

  • 健全:応答が清潔で数週間BANなし → 重要トラフィックを担当し、ドリフトを監視。
  • 病み:エラー・キャプチャ・403 → 数時間クールダウン後、低価値トラフィックで再テスト。
  • 死:TCP/TLS不通 → 即隔離し、予備と入れ替え。
  • 廃止:BAN反復、スコアが下限割れ → 恒久除外しパターンを記録。

4ステップで構築

  1. 全エンドポイントを一元化:供給元・国・セッション種別・購入日をメタデータに。
  2. 質素なプローバを作る:接続+TLS+サンプルリクエスト、結果は1テーブル。
  3. スコア入力とタスク別ルーティング閾値を決める(取引はスティッキー、探索はローテーション)。
  4. クールダウン/廃止方針を定め、健全IP数が安全余裕を割ったら警報。

FAQ

プールサイズは?

ピーク同時実行 × セッション長 × 安全係数1.5〜2、さらに20〜30%の予備。BANの波でも本番が止まりません。

廃止の判断基準は?

クールダウン期間内にBANが再発、または2回の完全再テストでもスコアが下限未満の場合。1回はノイズ、2週間で3回はレピュテーションの問題です。

FTProxyダッシュボードはnode単位の死活を可視化。