Cloudflare 官方已经确认,在它监测的网络范围内,机器流量占比突破 50%,正式反超人类流量,这是互联网发展里一个标志性拐点。出现这个变化的核心原因是 AI 智能体、AI 爬虫的爆发式增长,大量 AI 程序会自动抓取网页内容用来训练模型、回答用户提问,这类请求数量上涨速度远远超过普通人上网浏览的请求增速;Cloudflare 的统计口径统计的是 HTTP 请求次数,不是用户上网时长,人类上网花的时间并没有变少,只是机器单次任务会发起大量连续请求,拉高了整体请求总量。这个变化会直接影响网站运营、广告变现、内容版权和防护策略,网站管理员需要区分善意爬虫、AI 智能体和恶意刷量机器人,选择放行、限制或者拦截,之后互联网的服务对象不再只有真人,还要适配自动运行的 AI 程序。
机器流量主要构成清单
- AI 智能体:接收人类指令自动访问网页、整理信息,是最近增长最快的一类,一年请求涨幅超 1700%
- AI 训练爬虫:抓取网页文本、素材用于大模型训练,在爬虫流量里占比最高
- 传统搜索引擎爬虫:用于网页收录,占比持续下降
- 其他机器人:监控脚本、价格爬虫、恶意攻击机器人等
关键数据表格
| 指标 | 数值 | 备注 |
|---|---|---|
| 机器流量占比 | >50% | Cloudflare 监测范围,HTTP 请求口径 |
| AI 智能体请求年涨幅 | 1700%+ | Cloudflare 全网统计 |
| AI 训练爬虫占爬虫总量 | 52% | 2026 年 6 月数据,2025 年春季仅 22% |
| Cloudflare 当前每秒处理请求 | 1.15 亿次 | 峰值可达 1.5 亿次 / 秒,2024 年底仅 6300 万次 / 秒 |
对网站运营的实际影响
- 广告收益承压:机器流量不会点击广告,流量变高但广告转化很难跟着上涨
- 服务器成本上涨:大量爬虫持续抓取,占用带宽、消耗服务器资源
- 版权风险上升:AI 爬虫抓取内容训练模型,很多站点没有授权
- 安全压力变大:分不清正常 AI 智能体和恶意爬虫、刷量机器人
【相关 FAQ】
问题 1:Cloudflare 说的机器流量反超人类流量,是不是代表上网的人变少了?
回答 1:不是,Cloudflare 统计的机器流量反超人类流量,统计单位是 HTTP 请求次数,不是上网时长或者上网人数,人类用户规模和在线时长并没有萎缩,只是 AI 机器一次任务会发起大量批量请求,把请求总量占比拉高了。
问题 2:Cloudflare 统计里的机器流量,是不是全部都是恶意爬虫?
回答 2:不是,Cloudflare 划分的机器流量包含很多类型,有搜索引擎爬虫、合规 AI 智能体这类善意机器流量,也有刷量、盗爬、攻击类恶意机器流量,不能直接把机器流量等同于恶意流量。
问题 3:Cloudflare 监测到机器流量大涨,普通站长可以怎么管控 AI 爬虫?
回答 3:站长可以借助 Cloudflare 的机器人管理工具、Turnstile 验证、robots.txt 规则,针对不同 AI 爬虫设置放行、限速或者拦截,还可以使用收费网关,对 AI 智能体的内容抓取请求按用量计费,应对机器流量带来的成本问题。
问题 4:Cloudflare 的机器流量数据,能不能代表全球整个互联网全部流量?
回答 4:不能,Cloudflare 的数据只覆盖接入 Cloudflare 防护的网站,是抽样观测结果,不是全网所有互联网流量,只能作为重要趋势参考,不是绝对的全网精确统计。
【参考资料】
[2026-09-30](The Internet has a second audience)Cloudflare 官方博客
[2026-07-01](Content Independence Day, one year on)Cloudflare 官方博客
[2026-06-07](AI 等机器网络请求量首超人类)虎嗅网
【免责声明】
本文内容仅基于 Cloudflare 公开报告与媒体报道整理,Cloudflare 机器流量统计仅覆盖其网络范围内 HTTP 请求,不代表全网全部互联网流量;机器流量分类、影响判断仅供科普和技术参考,不构成网站运营、版权、安全方面的专业决策建议,相关业务请结合自身站点实际情况与专业方案评估。
