Cách đánh giá proxy: Phương pháp có thể lặp lại và ví dụ kiểm chứng

Đánh giá proxy chỉ có giá trị khi người khác có thể lặp lại và hiểu từng con số có ý nghĩa gì. Bài này xây dựng một phép thử nhỏ có thể kiểm tra, thay vì tạo bảng xếp hạng “proxy tốt nhất” không có bằng chứng. Tên tuyến và số đo bên dưới là dữ liệu mẫu tổng hợp, không phải chỉ số thời gian thực của nhà cung cấp nào.

Phép thử cần trả lời điều gì

Hãy dùng endpoint do bạn sở hữu hoặc được phép kiểm thử rõ ràng. Trong ví dụ, TARGET_URL là endpoint JSON có kiểm soát, còn kiểm tra IP echo dùng để xác nhận IP đầu ra thực tế. Chạy năm lần thử cho mỗi tuyến, cùng thứ tự khu vực, timeout và User-Agent. Không retry trong cửa sổ đo lường trừ khi kế hoạch xác định retry là một phần hành vi sản phẩm. Ghi từng lần thử trước rồi mới tính tổng hợp.

1. Cố định thiết kế trước khi nhìn vào số

Hãy dùng endpoint do bạn sở hữu hoặc được phép kiểm thử rõ ràng. Trong ví dụ, TARGET_URL là endpoint JSON có kiểm soát, còn kiểm tra IP echo dùng để xác nhận IP đầu ra thực tế. Chạy năm lần thử cho mỗi tuyến, cùng thứ tự khu vực, timeout và User-Agent. Không retry trong cửa sổ đo lường trừ khi kế hoạch xác định retry là một phần hành vi sản phẩm. Ghi từng lần thử trước rồi mới tính tổng hợp.

from dataclasses import dataclass
from time import perf_counter
import requests
 
TARGET_URL = "https://httpbin.org/anything?probe=arcvenza-proxy-evaluation"
 
@dataclass(frozen=True)
class Route:
    name: str
    proxy_url: str
    expected_region: str
 
ROUTES = [
    Route("authorized_route_a", "http://USER:PASSWORD@proxy.example.test:8080", "US"),
]
 
def probe(route: Route) -> dict:
    proxies = {"http": route.proxy_url, "https": route.proxy_url}
    started = perf_counter()
    try:
        response = requests.get(
            TARGET_URL, proxies=proxies, timeout=(10, 30),
            headers={"User-Agent": "ArcvenzaProxyEvaluation/1.0"},
        )
        latency_ms = round((perf_counter() - started) * 1000, 2)
        valid = response.ok and response.headers.get("content-type", "").startswith("application/json")
        return {"route": route.name, "status_code": response.status_code,
                "response_valid": int(valid), "latency_ms": latency_ms,
                "error_class": "none" if response.ok else f"target_{response.status_code // 100}xx"}
    except requests.exceptions.ProxyError:
        return {"route": route.name, "status_code": None, "response_valid": 0,
                "latency_ms": None, "error_class": "proxy_error"}
    except requests.exceptions.Timeout:
        return {"route": route.name, "status_code": None, "response_valid": 0,
                "latency_ms": None, "error_class": "timeout"}
    except requests.exceptions.RequestException:
        return {"route": route.name, "status_code": None, "response_valid": 0,
                "latency_ms": None, "error_class": "connect_error"}
 
for route in ROUTES:
    print(probe(route))

Đoạn probe tách lỗi truyền tải khỏi HTTP response. Mã 407 thuộc lỗi xác thực proxy, timeout không nên bị tính là request thành công nhưng chậm, còn 429 nên được ghi là giới hạn hoặc chính sách của target. Giữ nguyên nhóm lỗi để biết có nên retry thay vì gộp tất cả thành một bộ đếm “failed”.

2. Dùng fixture CSV có thể lặp lại

Fixture dưới đây có bốn tuyến mẫu ẩn danh, mỗi tuyến năm lần thử. Các IP trong cột IP thuộc dải dành cho tài liệu và chỉ mang tính minh họa. Các con số đủ nhỏ để kiểm tra bằng tay, nhưng cùng cột có thể dùng cho một lần chạy được cho phép. `geo_ok` nghĩa là vị trí IP đầu ra khớp khu vực yêu cầu; `compliance_ok` là cổng kiểm tra, không phải lời hứa về hiệu năng.

route,region,status_code,response_valid,latency_ms,ip,cost_usd,geo_ok,compliance_ok,error_class
sample_route_alpha,US,200,1,210,198.51.100.10,0.004,1,1,none
sample_route_alpha,DE,200,1,240,198.51.100.10,0.004,1,1,none
sample_route_alpha,SG,200,1,220,198.51.100.10,0.004,1,1,none
sample_route_alpha,US,200,1,230,198.51.100.10,0.004,1,1,none
sample_route_alpha,DE,200,1,250,198.51.100.10,0.004,1,1,none
sample_route_beta,US,200,1,180,198.51.100.11,0.003,1,1,none
sample_route_beta,DE,200,1,195,198.51.100.11,0.003,1,1,none
sample_route_beta,SG,200,1,205,198.51.100.12,0.003,1,1,none
sample_route_beta,US,200,1,215,198.51.100.11,0.003,1,1,none
sample_route_beta,DE,429,0,620,198.51.100.11,0.003,1,1,target_4xx
sample_route_gamma,US,200,1,320,198.51.100.13,0.006,1,1,none
sample_route_gamma,DE,200,1,350,198.51.100.13,0.006,1,1,none
sample_route_gamma,SG,200,1,480,198.51.100.13,0.006,0,1,none
sample_route_gamma,US,200,1,390,198.51.100.13,0.006,1,1,none
sample_route_gamma,DE,500,0,900,198.51.100.13,0.006,1,1,target_5xx
sample_route_delta,US,200,1,150,198.51.100.14,0.002,1,1,none
sample_route_delta,DE,200,1,160,198.51.100.15,0.002,0,1,none
sample_route_delta,SG,,0,2500,198.51.100.16,0.002,0,1,timeout
sample_route_delta,US,200,1,170,198.51.100.14,0.002,1,1,none
sample_route_delta,DE,407,0,190,198.51.100.14,0.002,0,1,proxy_auth

3. Tính tỷ lệ thành công, tính hợp lệ, độ trễ đuôi và độ ổn định

Thành công là chỉ số truyền tải: status từ 200 đến 399. Response hợp lệ nghiêm ngặt hơn và dựa trên kiểm tra nội dung riêng của target. Với endpoint JSON, có thể kiểm tra content type và một key bắt buộc. P95 dùng nội suy tuyến tính trên các latency đã ghi. Độ ổn định IP dựa trên số IP đầu ra khác nhau; nếu mục tiêu là xoay IP, hãy thay bằng mục tiêu xoay hoặc sticky đã được mô tả rõ.

import pandas as pd
 
df = pd.read_csv("proxy_probe_sample.csv")
df["transport_success"] = df["status_code"].between(200, 399).fillna(False).astype(int)
 
def p95(series):
    return series.quantile(0.95, interpolation="linear")
 
metrics = df.groupby("route").agg(
    attempts=("route", "size"),
    success_rate=("transport_success", "mean"),
    valid_response_rate=("response_valid", "mean"),
    mean_latency_ms=("latency_ms", "mean"),
    p95_latency_ms=("latency_ms", p95),
    unique_ips=("ip", "nunique"),
    mean_cost_usd=("cost_usd", "mean"),
    compliance_rate=("compliance_ok", "mean"),
).reset_index()
 
metrics["ip_stability"] = 1 - (
    (metrics["unique_ips"] - 1) / (metrics["attempts"] - 1).clip(lower=1)
)
 
geo = df.groupby("route").apply(
    lambda g: g.loc[g["geo_ok"].eq(1), "region"].nunique()
    / g["region"].nunique()
).rename("geo_coverage")
metrics = metrics.merge(geo, on="route")
 
def min_max_benefit(series):
    spread = series.max() - series.min()
    return 1.0 if spread == 0 else (series - series.min()) / spread
 
metrics["latency_score"] = 1 - min_max_benefit(metrics["mean_latency_ms"])
metrics["p95_score"] = 1 - min_max_benefit(metrics["p95_latency_ms"])
metrics["cost_score"] = 1 - min_max_benefit(metrics["mean_cost_usd"])
 
weights = {"success_rate": 0.20, "valid_response_rate": 0.15,
           "latency_score": 0.15, "p95_score": 0.10,
           "ip_stability": 0.10, "cost_score": 0.10,
           "geo_coverage": 0.10, "compliance_rate": 0.10}
metrics["weighted_score"] = sum(
    metrics[column] * weight for column, weight in weights.items()
) * 100
 
print(metrics.round(3).sort_values("weighted_score", ascending=False))

4. Chấm điểm có trọng số nhưng vẫn giữ các đánh đổi

Công thức của ví dụ là: thành công truyền tải 20% + response hợp lệ 15% + điểm độ trễ trung bình 15% + điểm P95 10% + ổn định IP 10% + điểm chi phí 10% + độ phủ địa lý 10% + tỷ lệ tuân thủ 10%. Các chỉ số có lợi được chuẩn hóa về 0–1 trong cùng tập kiểm thử; latency và chi phí càng thấp thì điểm càng cao. Trong hệ thống thật, hãy cố định cửa sổ tham chiếu hoặc dùng ngưỡng dịch vụ; nếu không, một tuyến cực đoan mới có thể thay đổi mọi điểm lịch sử.

Trong fixture này, sample_route_alpha đạt 95.0 vì thành công, hợp lệ, ổn định và phủ đủ khu vực. sample_route_beta rẻ hơn và nhanh hơn ở mức trung bình nhưng mất điểm vì một lần 429 và một lần đổi IP. sample_route_delta rẻ nhất mỗi lần thử, nhưng timeout, lỗi xác thực, IP không ổn định và độ phủ thấp khiến tổng điểm thấp nhất. Đây là kết quả của fixture, không phải bảng xếp hạng nhà cung cấp.

5. Làm cho phép so sánh công bằng

Tất cả tuyến phải gọi cùng phiên bản target và kích thước response. Ngẫu nhiên hóa thứ tự tuyến hoặc luân phiên thứ tự qua nhiều vòng để một tuyến không luôn chạy vào giờ bận. Giữ cùng khu vực client, DNS, TLS, concurrency, timeout, số lần thử và quy tắc warm-up. Công bố cửa sổ thời gian, cỡ mẫu, target, khu vực yêu cầu, loại trừ và taxonomy lỗi. Tách cold start khỏi session đã warm, đồng thời lưu raw rows cùng aggregate để người khác kiểm tra.

Vẫn có thể có bias: target giới hạn theo IP nguồn, cơ sở dữ liệu định vị IP bị cũ, năm lần thử là mẫu nhỏ, và thành phần pool có thể thay đổi theo thời gian. Hãy lặp lại vào nhiều ngày, báo cáo khoảng tin cậy khi cỡ mẫu đủ lớn và không biến một lần chạy thành nhãn vĩnh viễn.

6. Xem tuân thủ là cổng bắt buộc

Trước khi so sánh hiệu năng, hãy xác nhận tuyến được phép dùng cho target và workload; khi cần, xác nhận nhà cung cấp công bố nguồn và cách xử lý IP; đồng thời tuân thủ điều khoản, robots guidance, ranh giới xác thực, nghĩa vụ riêng tư và giới hạn tốc độ. Không dùng phương pháp này để vượt kiểm soát truy cập. Nếu compliance_ok là false hoặc không thể chứng minh cơ sở hợp lệ, hãy đánh dấu tuyến không đủ điều kiện thay vì để tốc độ hay giá thấp bù cho vấn đề tuân thủ.

Checklist đánh giá có thể triển khai

Viết kế hoạch trước; chọn target được phép; định nghĩa response hợp lệ; ghi raw attempts; phân loại lỗi; tính thành công, hợp lệ, latency trung bình, P95, ổn định IP, chi phí và độ phủ địa lý; áp dụng trọng số cố định; rà soát CSV; lặp lại qua nhiều cửa sổ thời gian; và ghi rõ giới hạn của kết luận. Kết quả là một quyết định có thể giải thích, thay vì tuyên bố “proxy tốt nhất” không thể kiểm tra.