프록시 성능 벤치마크가 실패하는 이유는 대개 지루합니다. 아무도 실제로 돌리지 않는 조건을 측정하기 때문입니다. 단일 스레드로 검색엔진에 한 번 요청해서는 오전 9시에 워커 40개가 상품 페이지를 가져갈 때의 동작을 알 수 없습니다.
신뢰할 수 있는 측정은 워크로드에서 거꾸로 설계합니다. 같은 요청 구성, 같은 대상, 같은 동시성, 같은 시간대, 그리고 평균이 아닌 백분위입니다.
도구보다 워크로드를 먼저 정의하기
- 요청 구성: HTML, JSON, 이미지, 다운로드 비율을 기록합니다. 작은 JSON에 맞춘 풀은 20MB 전송에서 전혀 다르게 동작합니다.
- 대상 집합: 검색엔진 하나가 아니라 실제 도메인 5~10개를 씁니다. TLS 스택도 봇 방어도 CDN 엣지도 다릅니다.
- 동시성: 실제 운영하는 10~50 워커에서 측정합니다. 직렬 테스트는 모든 공급자를 좋아 보이게 하고 대기열을 숨깁니다.
- 세션 모델: 워커가 sticky를 유지하는지 요청마다 회전하는지 명시합니다. 성공률에 대한 영향이 공급자 이름보다 클 수 있습니다.
벤치마크 전 체크리스트: 여섯 개 숫자
- 대상별 p50 지연. 대표적 경험이지만 그것만으로는 부족합니다.
- 엔드포인트마다 최소 500개 표본의 p95와 p99. 타임아웃과 재시도는 꼬리에 있습니다.
- 10, 30, 50 병렬에서의 성공률. 상태 코드와 내용이 모두 맞는 응답만 셉니다.
- DNS 경로. socks5와 socks5h는 20~80ms 차이와 서로 다른 유출 경로를 만듭니다.
- 고정 10~50MB 처리량을 3회. 따뜻한 캐시와 차가운 전송을 분리합니다.
- 체인지. sticky 세션에서 시간당 출구 IP 변경 횟수. 공지된 수명을 넘으면 약속 위반입니다.
간단 비교
- p50: 대표 지연과 기본 오버헤드, 자체 클라이언트로 측정.
- p95/p99: 꼬리 통증, 재시도 압력, 워커 유휴 시간.
- 10~50 병렬 성공률: 차단과 대기열 이전의 실제 용량.
- 처리량과 체인지: 대용량 전송과 로그인 워크플로의 성패를 결정합니다.
4단계로 측정하기
- 환경을 고정합니다. 같은 머신, 같은 클라이언트 버전, 같은 리전, 같은 스크립트.
- 워밍업 후 처음 50개 요청은 버립니다. TLS 핸드셰이크와 차가운 캐시가 꼬리를 왜곡합니다.
- 하루 두 시간대에 실행하고 둘 다 보고합니다. 보기 좋은 쪽만 고르지 않습니다.
- 3회 반복해 중앙값을 보고하고, 실패를 이유별로 분류합니다. 타임아웃, 403, 407, TLS.
자주 묻는 질문
p50보다 p95가 왜 중요한가요?
p50은 전형적인 요청의 비용, p95는 20개 중 1개에게 일어나는 일을 보여줍니다. 50 병렬에서는 몇 초에 한 번 타임아웃입니다. 재시도가 부하를 키워 꼬리를 더 밀어내고 장애가 누적됩니다. p50이 좋아지고 p95가 나빠지면 자동화에는 더 나빠진 풀입니다.
표본은 얼마나 필요한가요?
백분위에는 엔드포인트당 최소 500개, p99를 인용하려면 더 필요합니다. 성공률은 1,000개 요청이면 95% 신뢰도에서 오차 약 3%포인트로, 좋은 풀과 나쁜 풀을 구분하기에 충분합니다.
벤치마크는 출시 당일 9시에 장애를 발견하는 것보다 훨씬 저렴합니다. 비교 기준이 필요하다면 FTProxy 레지던셜 프록시가 노드별 지연과 성공률을 공개합니다.