什么是 botting?好机器人、坏机器人,以及你自己的自动化属于哪一类
本文目录
“Botting”指的是使用机器人(bot):由程序自己完成一项任务,而不是由人动手去做。这个词涵盖的范围很广,从让网站出现在 Google 搜索结果里的爬虫,到囤积限量商品的脚本都算,所以 botting 是没问题还是有问题,完全取决于这个机器人做了什么,以及它违反了谁的规则。本文把机器人的主要类别梳理一遍,说明网站如何把它们和真人区分开来、为什么由机器人驱动的账号那么容易被封,以及代理在哪些地方有用(又在哪些地方没用)。
“Botting”是什么意思
机器人(bot)是自动执行操作的软件:加载页面、点击、填写表单、发送消息、下单购买。Botting 就是使用它的做法。人们用这个词有两种含义:
- 中性的:泛指自动化,比如检查价格的脚本,或者一路点完结账流程的测试。
- 负面的:违反平台规则或损害他人的自动化,比如垃圾信息、虚假互动、撞库攻击、囤积库存,或者替你玩游戏的游戏机器人。
行业报告经常估计,自动化流量在全部网络流量中占很大一部分,近年来大约占一半,而其中很大一部分是恶意机器人。这就是网站要花力气去检测它们的原因,也是它们的防御有时连正当的自动化也一并拦住的原因。
机器人的主要类别
| 类别 | 示例 | 通常受欢迎吗? |
|---|---|---|
| 搜索引擎爬虫 | Googlebot、Bingbot | 是。它们会表明身份,并遵守网站的 robots.txt |
| 监控机器人 | 在线时间和性能检测工具 | 是,需经所有者同意 |
| 工作与测试自动化 | 你自己的 QA 脚本、定时任务、对自己页面的脚本检查 | 一般是,需符合网站条款 |
| 公开数据抓取程序 | 价格或房源信息收集程序 | 视条款、robots.txt、数据和访问节奏而定 |
| 滥用类机器人 | 撞库、垃圾信息、虚假评论和粉丝、广告欺诈 | 否 |
| 库存与排队机器人 | 抢购限量商品或门票 | 否。一些国家以法律禁止抢票机器人,例如美国 |
| 游戏机器人 | 自动刷怪、自动游玩 | 几乎总是违反游戏规则 |
标着“否”的那两行,正是我们的一些文章明确说代理帮不上忙的原因:参见 抢购与限量发售用代理 和 抢票用代理。
网站如何区分机器人和真人
没有哪一种测试单独就够用,所以网站会把几种叠加起来,从成本低的到成本高的依次是:速率限制、IP 信誉、浏览器验证、验证码(CAPTCHA)、设备指纹和行为评分。好的机器人会主动表明身份,对网站有帮助(清晰的 User-Agent、联系地址,大型搜索引擎还提供验证来源的方法),这也是它们受欢迎的部分原因。各个层次及其含义见 抓取有反机器人保护的网站,与代理相关的信号见 网站如何识别代理。从用户能直接感受到的一端来看,请见 为什么你总是遇到验证码。
为什么机器人驱动的账号会被封
在社交网络、电商平台和游戏里,条款通常禁止对你的账号进行自动化操作。封号往往源于一整套模式,而不是某一个单独事件:
- 不像人的节奏:操作间隔完全相同,全天候运行,从不休息。
- 重复:同样的点击路径、同样的消息、同样的文字。
- 从同一处规模化操作:许多账号从同一台设备或同一个地址做同样的事。
- 不匹配:登录的国家、设备或时区与账号的历史记录不符。
代理只改变一件事:网站看到的地址。它不会改变账号的行为方式。一个隐藏了你的 IP、却保留着完全相同操作模式的代理,在平台眼里依然是机器人。对于把代理当作“用机器人也不会被封”的办法来卖的人,请保持警惕;我们不这样卖,诚实的说法见 游戏 MMO 用代理 和 Roblox 账号安全。
正当的自动化,还是滥用?五个问题
在自动化任何事情之前,先问自己这几个问题:
- 它违反网站的条款吗?读一读条款。如果条款禁止自动化,那么不管你的机器人用哪个 IP,它都是被禁止的。
- 它会伤害其他人或网站吗?抢走别人想要的库存、拖慢服务器,或者用消息淹没别人,这些是伤害,不是效率。
- 它涉及个人数据吗?在没有法律依据的情况下收集姓名、电话号码或电子邮件,是另一个独立的问题。参见 网络抓取是否合法。
- 它欺骗了任何人吗?虚假互动、虚假评论和虚假账号,本身就是欺骗。
- 你能毫无愧色地向网站所有者解释它吗?一个有礼貌的价格检查程序可以通过,一个绕过购买限制的方案就不行。
如果这些问题的答案都没有问题,你就进入了 通过代理运行机器人和自动化 所讨论的范围。
代理在哪里派得上用场
对于正当的自动化,代理确实有用武之地:以新加坡访客的视角查看页面,从本地移动网络做测试,为不同的真实账号保持各自独立的工作会话,或者在运行测试套件时让你自己办公室的 IP 保持干净。但它买不来许可。它不能让被禁止的操作变成被允许,不能隐藏机器人的行为,也无法通过验证码。代理在有保护的网站上能做什么、不能做什么,见 抓取有反机器人保护的网站。
65Proxy
我们销售新加坡 4G 移动代理,每个订单一个,自带登录账号和轮换链接(最多每 5 分钟轮换一次),定价 1 天 $4、7 天 $13、1 个月 $32(每个含 200GB),另有带宽更大的月付套餐(500GB $40、1TB $65)。它们是给那些使用新加坡移动 IP 做正当工作的人准备的工具。我们不把它们当作绕过封禁、购买限制或网站规则的办法来卖,也不建议这样使用。
常见问题
Botting 违法吗?
这取决于机器人做了什么,以及在哪里做。违反网站的条款通常属于合同问题,而不是犯罪,但有些用法本身就是违法的(例如欺诈、进入你无权访问的账号,以及在一些国家使用抢票机器人)。你自己的情况请咨询律师;概览见 网络抓取是否合法。
脚本和机器人是一回事吗?
在实际中是的:每一步都不需要人参与就能运行的脚本,就是机器人。只有当这个脚本违反规则或损害他人时,这个词才成为问题。
代理能避免封号吗?
不能。封号取决于账号的行为,对某些平台来说还取决于设备。代理只改变 IP。
游戏机器人被允许吗?
几乎从不被允许。游戏禁止替你玩游戏的自动化,封禁还可能波及账号的购买内容。我们不写规避这类规则的指南。
如果我用移动代理,网站还能看出我在用机器人吗?
移动 IP 可以让地址看起来很普通,但网站同时也会读取访问节奏、浏览器信号和行为。如果这些看起来像自动化,IP 是遮不住的。