历史性拐点!互联网机器人流量首超人类,AI智能体加速重塑互联网格局

57.5%对42.5%:互联网默认访客从人变成机器

网络基础设施厂商Cloudflare CEO马修·普林斯(Matthew Prince)发文称,Cloudflare Radar过去7天实时监测显示,全球针对HTML网页内容的HTTP请求中,机器人(Bot)流量占比已达57.5%,人类流量仅剩42.5%。这一转折比行业此前预测提前了一年多。普林斯在X上坦言:“Welp, that happened faster than I predicted。”三个月前他预测Bot流量超越人类要到2027年底,如今事实已提前到来。

  • 在美国,机器人流量占比更高达71.5%,即每十次网页请求中七次多由机器发出。
  • 数据仅统计HTML页面请求,不含视频、流媒体、API等,但HTML恰是传统网页最核心的入口——过去“上网”指人通过浏览器访问网页,现在这个入口不再主要由人类打开。

8000%增长背后:AI Agent正在把网页变成操作界面

早期AI访问网页是为了训练——把内容抓进语料池;后来AI搜索兴起,需要实时抓取和总结;现在轮到AI Agent,它不满足于把网页变成答案,而是要把网页变成任务的一环。HUMAN Security的2026年AI Traffic报告显示:训练爬虫占比正在下降,而AI scrapers增长了597%,AI agents和agentic browsers的流量同比暴涨7,851%!2025年自动化流量同比增长23.51%,是人类流量增速(3.10%)的近8倍。

  • 传统爬虫在“读网页”,Agent在“使用网页”——它会比较平台、筛除差评、核对优惠券,甚至结账。
  • AI流量高度集中在三个行业:零售电商、流媒体与媒体、旅游和酒店,因为这些行业最适合Agent代人类执行操作。

入口争夺战:OpenAI占69%,网站沦为“隐形供应商”

报告显示,AI流量高度集中在少数平台:OpenAI相关bots占比约69%,Meta约16%,Anthropic约11%。PC时代网站争夺Google入口,移动时代争夺App和信息流,Agent时代的入口正集中到少数模型公司手里。用户不再自己开十个网页比较,而是问模型一句话,模型替他筛选、压缩甚至执行。

  • 搜索引擎抓网页,至少承诺交换:我抓你内容,给你带回点击。AI入口更狠——它抓取、理解、总结,最后直接交出答案,原网站沦为模型背后的“隐形供应商”。
  • 这正是Cloudflare推出Pay Per Crawl(按爬取付费)引发热议的原因——给“机器访问内容”重新定价成为必然。

双层架构兴起:给人讲故事,给机器留接口

过去互联网的账本按人记:UV、PV、DAU、转化率,全默认访问者是人。如今网站面对的不再只是SEO,而是新问题:我的网页Agent能读懂吗?信息模型能信任吗?服务机器能调用吗?内容被消费后能获回报吗?

未来很多网站会演变成双层结构:

  • 一层给人看,争夺注意力——需要故事、视觉、停留时间;
  • 一层给Agent读,争夺机器可用性——需要结构、权限、接口和责任边界。

57.5%远不是终点。互联网正从“人类的浏览场”走向“机器的执行场”,人依然是意图的源头和价值的终点,但中间的触达、交互与交付,正不可逆地交由Agent完成。