プロキシプール管理の差が、静かに劣化する仕組みと、顧客が気づく前に警報を上げる仕組みを分けます。プールの質は稼働中最悪のIPで決まります。腐ったエグジット1つがジョブ全体を汚染し、健常でも遊んでいるIPは請求額だけ膨らませます。
本稿では運用ループ全体を扱います:死活監視、スコアリング、クールダウン、ローテーション方針、失敗の帰属。
プール管理の4本柱
- 常時の死活監視:バックグラウンドワーカーが数分ごとに全IPの接続レイテンシ・TLSハンドシェイク・DNSを確認し、ジョブより先に障害を検知。
- 死と病みの分離:死は接続不可、病みは接続できるがエラーやキャプチャ。対応はまったく別。
- 感覚ではなくスコア:成功率・レイテンシ・最終BANからの実スコアで振り分け。
- 全レスポンスで帰属記録:リクエスト毎にエグジットIPを記録し、失敗に「どのIP・どのエラー・何回目」で答えられるように。
運用チェックリスト
- 計画的にプローブ:生死フラグではなくレイテンシのパーセンタイルを保存。
- 失敗を分類:死は廃止審査、病みはクールダウン後に再テスト。
- 3指標でスコア化:直近N件の成功率、p95レイテンシ、最終BANからの経過時間。
- スコアでルーティング:重要トラフィックは閾値以上のみ。探索ジョブは未知IPも試してスコアボードに学ばせる。
- クールダウンは分単位でなく時間単位。累犯は廃止し隔離ログに記録。
IP状態の比較
- 健全:応答が清潔で数週間BANなし → 重要トラフィックを担当し、ドリフトを監視。
- 病み:エラー・キャプチャ・403 → 数時間クールダウン後、低価値トラフィックで再テスト。
- 死:TCP/TLS不通 → 即隔離し、予備と入れ替え。
- 廃止:BAN反復、スコアが下限割れ → 恒久除外しパターンを記録。
4ステップで構築
- 全エンドポイントを一元化:供給元・国・セッション種別・購入日をメタデータに。
- 質素なプローバを作る:接続+TLS+サンプルリクエスト、結果は1テーブル。
- スコア入力とタスク別ルーティング閾値を決める(取引はスティッキー、探索はローテーション)。
- クールダウン/廃止方針を定め、健全IP数が安全余裕を割ったら警報。
FAQ
プールサイズは?
ピーク同時実行 × セッション長 × 安全係数1.5〜2、さらに20〜30%の予備。BANの波でも本番が止まりません。
廃止の判断基準は?
クールダウン期間内にBANが再発、または2回の完全再テストでもスコアが下限未満の場合。1回はノイズ、2週間で3回はレピュテーションの問題です。