代理 IP 地址质量检测指标，搭建自动化巡检方案

拿到代理 IP 地址之后，很多团队直接投入业务脚本，缺少常态化质量检测流程，等到线上大批量请求失败、采集成功率暴跌之后，才发现池子里大量失效、低质量代理 IP 地址。单纯依靠服务商提供的可用率报表并不稳妥，服务商侧检测链路和我们业务访问目标站点链路不一样，服务商显示可用的代理 IP 地址，访问目标网站可能已经被封禁。想要稳定用好代理 IP 地址，必须自建检测体系，用多个核心指标衡量代理 IP 地址质量，定时巡检、自动剔除坏 IP，维护高质量代理 IP 地址池。

代理 IP 地址第一核心指标：连通成功率

连通成功率，指使用这条代理 IP 地址发起请求，能够正常建立连接并拿到响应的比例，是最基础的检测指标。检测的时候，不能只访问通用测速站点，要优先用业务目标站点做检测，这是很多人容易忽略的重点。同一个代理 IP 地址，访问通用检测网站正常，访问业务目标站点可能直接返回 403、验证码、拒绝访问，这种 IP 对于我们业务来说，就是无效代理 IP 地址。

检测脚本的逻辑可以这样设计：批量从代理接口获取代理 IP 地址，设置统一的连接超时、读取超时参数，循环向目标业务域名发起 GET 请求，记录每一条代理 IP 地址的成功次数、失败次数。连续多次请求失败的代理 IP 地址，标记为失效，移入黑名单，一段时间内不再调度使用。连通成功率建议设置阈值，单条代理 IP 地址成功率低于 80%，直接判定为低质量 IP，从可用池移除。

代理 IP 地址第二核心指标：访问延迟

延迟代表代理 IP 地址节点的响应速度，延迟过高，会拖慢整个采集任务的吞吐效率，大量线程堆积超时，业务吞吐量上不去。检测延迟的时候，记录从发起 TCP 连接到拿到首包响应的耗时，区分连接延迟和整体请求延迟。

按照业务经验划分，延迟低于 100ms 属于优质代理 IP 地址；100ms 到 300ms 属于正常可用区间；300ms 到 800ms 属于低速 IP，适合低优先级任务；超过 800ms 的代理 IP 地址，不建议投入高并发主线业务，可以单独放到备用池，只做非紧急查询。不同地域节点延迟天然有差异，跨城市节点延迟会更高，检测的时候要按照 IP 归属地分组统计，不要用统一延迟标准评判所有代理 IP 地址。

代理 IP 地址第三核心指标：IP 纯净度与黑名单状态

纯净度是决定代理 IP 地址能不能长期稳定使用的关键，一条代理 IP 地址如果之前被大量用户用来高频采集、违规操作，就会进入各大平台黑名单，后续无论怎么调整请求频率，访问都会持续受限。纯净度检测，除了访问业务站点验证拦截情况，还可以查询 IP 历史标记记录，判断该代理 IP 地址是否在风控黑名单库内。

需要注意，黑名单是分平台独立的，一个代理 IP 地址在 A 网站正常，在 B 网站已经被封禁，所以纯净度检测必须绑定业务站点。不要依赖第三方通用黑名单查询结果，只能作为辅助参考，业务站点的真实访问反馈才是最权威的判断标准。新采购的代理 IP 地址，先做一轮冷启动测试，低频率访问目标站点，观察是否弹出验证，验证通过之后再放进正式 IP 池投入使用。

代理 IP 地址第四核心指标：归属地一致性

很多业务，比如本地竞品监测、区域价格采集、地域关键词排名查询，对代理 IP 地址的归属城市有严格要求。如果服务商标注这条代理 IP 地址属于杭州，实际访问解析出来归属在别的城市，地域数据就会失真，整个业务数据失去参考价值。

归属地检测方法，请求 IP 信息查询接口，读取代理 IP 地址对应的城市、运营商信息，和服务商标注的地域对比，不一致的代理 IP 地址直接剔除，不投入地域相关业务。地域错位是代理服务商很常见的问题，尤其是低价动态 IP 池，节点调度的时候容易出现地域漂移，定时巡检归属地，可以避免产出错误的业务数据。

自动化巡检脚本落地与 IP 池分层管理

完整的巡检方案，分为定时全量巡检、使用中实时检测两个部分。定时巡检，每间隔一段时间拉取全部代理 IP 地址批量检测；实时检测，业务脚本在使用代理 IP 地址发起请求的时候，同步记录本次请求结果，连续失败自动触发标记。

IP 池可以分层管理，分为优质池、备用池、黑名单池。检测达标的低延迟、高成功率代理 IP 地址放入优质池，优先调度；延迟偏高、偶尔失败的放入备用池，低优先级任务调用；连续失败、地域错误、黑名单 IP 放入黑名单池，设置冷却时间，冷却完成之后重新复测，复测通过才可以回到可用池。

这套巡检机制搭建完成之后，不需要人工手动筛选代理 IP 地址，系统自动维护 IP 池质量，大幅降低线上业务异常概率，提升采集成功率。代理 IP 地址的质量不是一成不变的，节点网络波动、平台风控策略更新，都会让原本优质的代理 IP 地址失效，持续巡检是长期稳定使用代理 IP 地址必不可少的一环。