Quản lý proxy pool là ranh giới giữa hệ thống lặng lẽ xuống cấp và hệ thống báo động trước khi khách hàng kịp nhận ra. Một pool chỉ tốt bằng IP tệ nhất còn sống trong vòng rotation: một exit thối có thể đầu độc cả job, còn hàng chục IP khỏe nhưng nằm im thì chỉ phình hóa đơn.
Bài viết mô tả vòng vận hành đầy đủ: health check, chấm điểm, cooldown, chính sách rotation và truy vết lỗi.
Bốn trụ cột của quản lý proxy pool
- Health check liên tục: worker nền probe mọi IP mỗi vài phút — latency, TLS handshake, DNS, để bạn biết lỗi trước job của bạn.
- Tách dead khỏi sick: dead là không kết nối được; sick là nối được nhưng trả lỗi/captcha/soft block — cách xử lý hoàn toàn khác nhau.
- Chấm điểm thay vì cảm tính: mỗi IP có score trực tiếp từ tỷ lệ thành công, latency và thời điểm block gần nhất.
- Truy vết sau mỗi response: log exit IP theo request để fail nào cũng trả lời được “IP nào, lỗi gì, retry thứ mấy”.
Checklist vận hành
- Probe theo lịch cố định: ghi percentile latency, không chỉ cờ sống/chết.
- Phân loại lỗi: dead đưa vào xét nghỉ hủi; sick đưa vào cooldown rồi test lại.
- Chấm điểm bằng 3 số: success rate N request gần nhất, latency p95, số giờ từ lần block cuối.
- Route theo score: traffic quan trọng chỉ đi IP trên ngưỡng; job khám phá được phép thử IP chưa biết.
- Cooldown tính theo giờ chứ không phải phút; tái phạm nhiều lần thì nghỉ hủi kèm log cách ly.
So sánh trạng thái IP
- Healthy: phản hồi sạch, nhiều tuần không block → giữ cho traffic quan trọng.
- Sick: lỗi, captcha, 403 → cooldown vài giờ rồi test lại bằng traffic giá trị thấp.
- Dead: không TCP/TLS → cách ly ngay, lấy IP dự phòng thay thế.
- Retired: block lặp lại, score dưới sàn → loại vĩnh viễn và ghi lại pattern.
Thiết lập trong 4 bước
- Gom toàn bộ endpoint về một nơi, kèm metadata: provider, quốc gia, loại session, ngày mua.
- Dựng prober đơn giản: connect + TLS + sample request, kết quả ghi vào một bảng.
- Chọn input score và ngưỡng route cho từng loại job (sticky cho giao dịch, rotating cho dò tìm).
- Đặt chính sách cooldown/nghỉ hủi và gắn alert khi số IP khỏe tụt dưới mức an toàn.
FAQ
Pool nên cỡ bao nhiêu?
Lấy peak concurrency × độ dài session × hệ số an toàn 1.5–2, cộng thêm 20–30% dự phòng để sóng ban không làm đứng production.
Bao giờ nên nghỉ hủi một IP?
Khi block lặp ngay trong cửa sổ cooldown hoặc score không vượt sàn sau hai lần test lại đầy đủ. Block một lần là nhiễu; ba lần trong hai tuần là vấn đề reputation.