프록시 성능 벤치마크가 실패하는 이유는 대개 지루합니다. 아무도 실제로 돌리지 않는 조건을 측정하기 때문입니다. 단일 스레드로 검색엔진에 한 번 요청해서는 오전 9시에 워커 40개가 상품 페이지를 가져갈 때의 동작을 알 수 없습니다.

신뢰할 수 있는 측정은 워크로드에서 거꾸로 설계합니다. 같은 요청 구성, 같은 대상, 같은 동시성, 같은 시간대, 그리고 평균이 아닌 백분위입니다.

도구보다 워크로드를 먼저 정의하기

  • 요청 구성: HTML, JSON, 이미지, 다운로드 비율을 기록합니다. 작은 JSON에 맞춘 풀은 20MB 전송에서 전혀 다르게 동작합니다.
  • 대상 집합: 검색엔진 하나가 아니라 실제 도메인 5~10개를 씁니다. TLS 스택도 봇 방어도 CDN 엣지도 다릅니다.
  • 동시성: 실제 운영하는 10~50 워커에서 측정합니다. 직렬 테스트는 모든 공급자를 좋아 보이게 하고 대기열을 숨깁니다.
  • 세션 모델: 워커가 sticky를 유지하는지 요청마다 회전하는지 명시합니다. 성공률에 대한 영향이 공급자 이름보다 클 수 있습니다.

벤치마크 전 체크리스트: 여섯 개 숫자

  1. 대상별 p50 지연. 대표적 경험이지만 그것만으로는 부족합니다.
  2. 엔드포인트마다 최소 500개 표본의 p95와 p99. 타임아웃과 재시도는 꼬리에 있습니다.
  3. 10, 30, 50 병렬에서의 성공률. 상태 코드와 내용이 모두 맞는 응답만 셉니다.
  4. DNS 경로. socks5와 socks5h는 20~80ms 차이와 서로 다른 유출 경로를 만듭니다.
  5. 고정 10~50MB 처리량을 3회. 따뜻한 캐시와 차가운 전송을 분리합니다.
  6. 체인지. sticky 세션에서 시간당 출구 IP 변경 횟수. 공지된 수명을 넘으면 약속 위반입니다.

간단 비교

  • p50: 대표 지연과 기본 오버헤드, 자체 클라이언트로 측정.
  • p95/p99: 꼬리 통증, 재시도 압력, 워커 유휴 시간.
  • 10~50 병렬 성공률: 차단과 대기열 이전의 실제 용량.
  • 처리량과 체인지: 대용량 전송과 로그인 워크플로의 성패를 결정합니다.

4단계로 측정하기

  1. 환경을 고정합니다. 같은 머신, 같은 클라이언트 버전, 같은 리전, 같은 스크립트.
  2. 워밍업 후 처음 50개 요청은 버립니다. TLS 핸드셰이크와 차가운 캐시가 꼬리를 왜곡합니다.
  3. 하루 두 시간대에 실행하고 둘 다 보고합니다. 보기 좋은 쪽만 고르지 않습니다.
  4. 3회 반복해 중앙값을 보고하고, 실패를 이유별로 분류합니다. 타임아웃, 403, 407, TLS.

자주 묻는 질문

p50보다 p95가 왜 중요한가요?

p50은 전형적인 요청의 비용, p95는 20개 중 1개에게 일어나는 일을 보여줍니다. 50 병렬에서는 몇 초에 한 번 타임아웃입니다. 재시도가 부하를 키워 꼬리를 더 밀어내고 장애가 누적됩니다. p50이 좋아지고 p95가 나빠지면 자동화에는 더 나빠진 풀입니다.

표본은 얼마나 필요한가요?

백분위에는 엔드포인트당 최소 500개, p99를 인용하려면 더 필요합니다. 성공률은 1,000개 요청이면 95% 신뢰도에서 오차 약 3%포인트로, 좋은 풀과 나쁜 풀을 구분하기에 충분합니다.

벤치마크는 출시 당일 9시에 장애를 발견하는 것보다 훨씬 저렴합니다. 비교 기준이 필요하다면 FTProxy 레지던셜 프록시가 노드별 지연과 성공률을 공개합니다.