脏代理的真实代价:验证码、重试、浪费的流量和被审查的账号
本文目录
脏代理在价格页上看起来像一笔划算的买卖:同样叫“代理”,价格却只是零头。账单会在之后才来,体现在验证码、重试、浪费的流量、错误的数据,以及被平台审查的账号上。本文列出不会出现在价签上的五项成本,用一个例子把算术演示一遍,并给你一个在决定买一个月之前可以做的 10 分钟测试。
“脏”在实际中是什么意思
脏代理(信誉差的代理)指的是 IP 地址在你所用的网站上得分很差:它们位于被网站标记的服务器网段,出现在滥用名单上,和行为不端的人共用,或者三者兼有。你无法从价格或卖家的描述中看出来,只能从网站如何对待这个 IP 看出来。什么让一个 IP 变干净或变脏,见 干净代理与黑名单,它如何变成验证,见 干净代理与验证码。
价签上看不到的五项成本
- 1. 你的时间。每一次验证码、验证页面和拦截,都是一次暂停或一次失败的运行。总得有人盯着它们、轮换、重跑,还得向客户解释为什么活还没做完。
- 2. 流量。被验证的请求必须重做,而且验证页面往往还会自己加载脚本和图片,这些全都要走代理。在有每月流量额度的套餐里,这就是花在无法使用的页面上的额度。
- 3. 错误的数据。不认得验证码页面的抓取程序,可能把它当成商品页面存下来。结果就是得到一个满是空行或错行的数据集,而且你是事后才发现的,这比一个明确的错误更糟。
- 4. 账号风险。从一个网站不信任的 IP 登录账号,可能触发额外的验证、临时锁定或审查。如果这个账号是客户的,或者是你自己店铺的,这就是实实在在的成本。
- 5. 安全。免费代理和来历不明的代理可以读取未加密的流量,对 HTTP 来说还可以改动它。即使是付费的脏代理,也能反映出卖家有多用心。相关风险见 免费代理与付费代理的区别 和 代理安全。
一个演算示例
下面的数字只是算术的演示,并不是对任何服务商的基准测试。假设你需要加载 10,000 个页面,每个大约 2 MB,并且每次被验证的加载都必须重做。为了简单起见,先忽略验证页面本身的体积。
| 干净 IP | 脏 IP | |
|---|---|---|
| 被要求验证的加载占比 | 2% | 30% |
| 得到 10,000 个有效页面所需的加载次数 | 约 10,200 | 约 14,300 |
| 用掉的流量(每个 2 MB) | 约 20.4 GB | 约 28.6 GB |
| 比理想的 20 GB 多出 | 约 2% | 约 43% |
公式很简单:所需加载次数 = 想要的有效页面数 ÷(1 减去被验证占比)。所以 30% 的验证率,比 2% 的验证率多花大约 40% 的流量和时间,而这还没算上实际中会让情况更糟的两个因素:快速重试往往会让验证率进一步升高,而且验证页面本身加载也不是免费的。请使用你自己的页面大小和你自己测得的验证率;如何测量在姊妹篇中有说明。
看每个有效页面的价格,而不是每月的价格
比较两个代理时,真正有用的是一个成功页面的成本:
每个有效页面的成本 =(套餐价格)÷(在流量额度内正常加载的页面数)
一个更便宜、但只能提供 60% 可用页面的代理,按每个有效页面算,可能比一个更贵、但能提供 95% 可用页面的代理还要贵。如果再把你自己的时间算到脏代理那一边,差距还会拉大。别忘了,每月的流量额度(例如基础套餐的 200GB)每一次加载都会消耗,不管这次加载是否可用。
付款之前如何识别脏代理
十分钟就足以发现大多数问题:
- 检查 IP 及其所属网络。确认国家,并确认网络是移动或住宅网络(如果你买的就是这种)。如何分辨真假 4G 代理讲了具体方法。
- 在 IP 信誉或黑名单检查工具里查询这个地址。出现在一个名单上还不能定论,但出现在好几个上就是了。
- 通过代理手动加载你真正的目标网站。如果第一次加载就遇到验证页面,答案就有了。
- 跑一次你的小测试,参照测量步骤:以人的节奏加载 50 个页面,然后统计验证次数。
- 轮换一次再重复。如果 IP 池里的每个 IP 表现都一样,问题就出在 IP 池上。
- 用试用。愿意让你在目标网站上测试的卖家,对自己的 IP 是有信心的。免费 1 小时试用就是我们的做法。
如果想要一份涵盖范围不止于 IP 的更长清单,见 购买代理前的检查清单。
便宜的代理什么时候也够用
并不是每项工作都需要干净的 IP。对于不按 IP 类型过滤的网站上的任务,比如获取你自己的页面或开放的 API,便宜的数据中心代理可能就是正确答案。错误在于把它买来对付一个确实会过滤的目标,并且在钱花出去之后才发现。让代理与目标相匹配;各类代理的对比见 4G 代理、住宅代理与数据中心代理对比。
65Proxy
我们销售新加坡 4G 移动代理,每个订单一个,自带登录账号和轮换链接(最多每 5 分钟轮换一次),定价 1 天 $4、7 天 $13、1 个月 $32(每个含 200GB),另有带宽更大的月付套餐(500GB $40、1TB $65)。我们不声称某个 IP 永远不会被验证或被列入名单,因为没有哪个诚实的卖家能这样说。我们提供的是一种办法:在你购买之前,免费一小时,在你自己的目标上查个明白:开始试用。
常见问题
更贵的代理一定更干净吗?
不一定。价格取决于成本和定位,而不是信誉。请按上面的测试,看你的目标网站如何对待它,再来评判一个代理。
为什么便宜的代理这么快就被封?
通常是因为许多人共用同样的少数几个地址,其中有些人在滥用,而且这些地址来自网站已经标记过的服务器网段。一个 IP 上的陌生人越多,它的信誉往往越差。
我能把脏 IP 洗干净吗?
你自己做不到。信誉是由过去的流量积累起来的,而你无法控制这些流量。你可以避免让它变得更糟(适度的节奏、每个 IP 只用一个身份),或者换一个不同的 IP。
验证码会浪费多少流量?
这取决于网站和你的验证率,所以没有一个诚实的通用数字。上面的例子演示了算术;请代入你自己的页面大小和实测的比例。