作者 | 四月

過去半個多世紀，互聯網的技術和商業體系，都是建立在“服務對象是人”這個前提之上的。

因為人會打開網頁、點擊鏈接，網站才需要精心的設計視覺與交互；因為人的注意力有限，搜索才需要排序、內容才需要推薦。我們習以為常的瀏覽、搜索和留痕，構成了整個互聯網商業的基石。

但現在，這塊前提正在松動。

根據 Cloudflare Radar 數據顯示，在全球 HTML 網頁請求里，Bot 機器人的流量占比已達 57.5%，人類流量只剩 42.5%。互聯網有史以來第一次，訪問網頁的請求里，機器比人更多。

也就是說，互聯網的默認訪客，正在從“人”變成“機器人”。以前我們問“網站有多少人訪問”，接下來要問的是：有多少機器在替人訪問？它們是誰派來的？它們想干嘛？

并且，機器人的訪問分布是極不均勻的。全球均值是 57.5%，但在美國，這個數字達到了 71.5%。也就是說，在全球互聯網最發達的市場里，每十次網頁訪問請求，七次多是機器發出的。

Cloudflare CEO Matthew Prince 在 x 上談道：“Welp, that happened faster than I predicted.”

三個月前，他在 SXSW 上預測，Bot 流量超過人類流量大概得等到 2027 年底。現在他不得不承認，這個速度比以往任何時刻都要更快。

值得注意的是，上述統計僅限 HTML 頁面請求，不含圖片、視頻、API 和流媒體等。但即便加上限定，這依然是個歷史性的時刻。因為 HTML 恰恰是傳統網頁世界最核心的入口。

過去我們說“上網”，本質就是人通過瀏覽器訪問網頁；而現在，這個入口不再主要由人類打開。越來越多網頁，是被爬蟲、監控腳本、AI 抓取器，以及正在興起的 AI Agent 打開的。

Bot 超過人類，不是終點，而是開場

Bot 不是新玩意。搜索引擎爬蟲、安全掃描腳本、價格監控，早就構成了互聯網的暗流。今天真正的新變化，不是“有 Bot 了”，而是 Bot 的角色變了。

過去的 Bot，更多在為系統服務——抓取、索引、監控，任務清晰，邊界穩定。但 Agent 出現后，Bot 開始代表人的意圖行動。

一個購物 AI 不只是看價格，它會比較平臺、篩除差評、核對優惠券，甚至結賬；一個旅行 Agent 不僅搜航班，還會對比酒店、查庫存、預訂行程；研究 Agent 則能連開幾十個網頁，交叉驗證后組織成報告。

傳統爬蟲是在“讀網頁”，Agent 是在“使用網頁”。

前者是讀者，后者是代理。它不是替人看一眼，而是替人完成一連串動作。也正因如此，Bot 流量超過人類，并不是 Agent 時代的終點，而是它全面侵入互聯網的前奏。

8000% 增長背后：從閱讀走向行動

當前的 AI 流量里，訓練爬蟲仍是主力，但結構正在劇變。

HUMAN Security 的 2026 年 AI Traffic 報告顯示：訓練爬蟲占比正在下降，而 AI scrapers 增長了 597%，并且 AI agents 和 agentic browsers 的流量同比暴漲 7,851%！

2025 年自動化流量同比增長 23.51%，是人類流量增速（3.10%）的近 8 倍。其中，AI 驅動流量年內增長 187%。

這說明，AI 訪問互聯網的動機變了。

早期 AI 訪問網頁，主要是為了訓練，把內容抓進語料池；后來 AI 搜索興起，需要實時抓取和總結；現在輪到 Agent，它不滿足于把網頁變成答案，而是要把網頁變成任務的一環。網頁不再是信息源，而是操作界面。

這也是為什么 AI 流量高度集中在三個行業：零售電商、流媒體與媒體、旅游和酒店。

它們的共同點是：信息高度結構化、變化頻繁，且直接連接交易。商品價格、庫存、房態、評價，都很適合機器讀取、比較和行動。此時，網頁不再是內容展示頁，而變成了機器決策鏈條里的一個節點。

以前網站怕沒人來，現在怕來的不是人

過去，網站最怕沒流量，所有運營動作都指向“把人引過來”。但 Agent 時代，問題變了：網站可能有大量訪問，可來的不是人。

機器讀完網頁，提取重點，把結果直接呈現在 ChatGPT、Perplexity 等入口里。用戶得到了答案，卻未必會點擊原網頁。內容被消費了，流量卻沒有回來。

搜索引擎抓網頁，至少承諾一種交換：我抓你內容，給你帶回點擊。AI 入口更狠，它抓取、理解、總結，最后直接交出答案，原網站淪為模型背后的“隱形供應商”。

這正是 Cloudflare 推出 Pay Per Crawl（按爬取付費）引發熱議的原因，它本質上是在給“機器訪問內容”重新定價。過去互聯網的賬本按人記：UV、PV、DAU、轉化率，全默認訪問者是人。

一旦機器成為主要訪客，這套賬本就開始失靈——機器能創造訪問量，卻不一定創造廣告價值；能消耗內容，卻不一定帶來品牌認知。流量，開始不再等于價值。

入口從搜索框，轉向模型和 Agent

入口控制權也在轉移。報告顯示，AI 流量高度集中在少數平臺：OpenAI 相關 bots 占比約 69%，Meta 約 16%，Anthropic 約 11%。

PC 時代網站爭奪 Google 入口，移動時代爭奪 App 和信息流，Agent 時代的入口，正集中到少數模型公司手里。用戶不再自己開十個網頁比較，而是問模型一句話，模型替他篩選、壓縮甚至執行。

網站面對的不再只是 SEO，而是新問題：我的網頁 Agent 讀懂嗎？信息模型能信任嗎？服務機器能調用嗎？內容被消費后能獲回報嗎？

未來很多網站會演變成雙層結構：一層給人看，爭奪注意力；一層給 Agent 讀，爭奪機器可用性。給人看的需要故事、視覺、停留時間；給機器看的需要結構、權限、接口和責任邊界。

流量主體轉變的背后

我們看到，當互聯網的流量主體從人變成 Agent，隨即也帶動了三個層面的深層變化：

網頁變了，從供人閱讀的信息源，變成供機器執行的操作界面；價值變了，從基于人類注意力的變現，轉向基于機器調用的定價；入口變了，從搜索框的分發，轉向大模型的一言而決。

57.5% 遠不是終點，很有可能只是一個開始，是互聯網從“人類的瀏覽場”走向“機器的執行場”的起跑線。人依然是意圖的源頭和價值的終點，但中間的觸達、交互與交付，正不可逆地交由 Agent 完成。

聲明：本文為 AI 前線原創，不代表平臺觀點，未經許可禁止轉載。

會議推薦

企業級 Agent 落地，繞不開 4 個真實的工程問題！如何在 Agent 安全性和可用性之間找到平衡點？Agent 需要什么樣的記憶系統才能真正理解上下文？如何通過算法壓榨實現智力增量與成本控制的極致平衡？多 Agent 協作，如何做到可觀測、可治理、可控制？6.26-27 AICon 上海站，國內頭部公司的 Agent 實踐，一次說透。

今日薦文

你也「在看」嗎？