作者 | 四月

過(guò)去半個(gè)多世紀(jì)，互聯(lián)網(wǎng)的技術(shù)和商業(yè)體系，都是建立在“服務(wù)對(duì)象是人”這個(gè)前提之上的。

因?yàn)槿藭?huì)打開(kāi)網(wǎng)頁(yè)、點(diǎn)擊鏈接，網(wǎng)站才需要精心的設(shè)計(jì)視覺(jué)與交互；因?yàn)槿说淖⒁饬τ邢蓿阉鞑判枰判颉?nèi)容才需要推薦。我們習(xí)以為常的瀏覽、搜索和留痕，構(gòu)成了整個(gè)互聯(lián)網(wǎng)商業(yè)的基石。

但現(xiàn)在，這塊前提正在松動(dòng)。

根據(jù) Cloudflare Radar 數(shù)據(jù)顯示，在全球 HTML 網(wǎng)頁(yè)請(qǐng)求里，Bot 機(jī)器人的流量占比已達(dá) 57.5%，人類流量只剩 42.5%。互聯(lián)網(wǎng)有史以來(lái)第一次，訪問(wèn)網(wǎng)頁(yè)的請(qǐng)求里，機(jī)器比人更多。

也就是說(shuō)，互聯(lián)網(wǎng)的默認(rèn)訪客，正在從“人”變成“機(jī)器人”。以前我們問(wèn)“網(wǎng)站有多少人訪問(wèn)”，接下來(lái)要問(wèn)的是：有多少機(jī)器在替人訪問(wèn)？它們是誰(shuí)派來(lái)的？它們想干嘛？

并且，機(jī)器人的訪問(wèn)分布是極不均勻的。全球均值是 57.5%，但在美國(guó)，這個(gè)數(shù)字達(dá)到了 71.5%。也就是說(shuō)，在全球互聯(lián)網(wǎng)最發(fā)達(dá)的市場(chǎng)里，每十次網(wǎng)頁(yè)訪問(wèn)請(qǐng)求，七次多是機(jī)器發(fā)出的。

Cloudflare CEO Matthew Prince 在 x 上談道：“Welp, that happened faster than I predicted.”

三個(gè)月前，他在 SXSW 上預(yù)測(cè)，Bot 流量超過(guò)人類流量大概得等到 2027 年底。現(xiàn)在他不得不承認(rèn)，這個(gè)速度比以往任何時(shí)刻都要更快。

值得注意的是，上述統(tǒng)計(jì)僅限 HTML 頁(yè)面請(qǐng)求，不含圖片、視頻、API 和流媒體等。但即便加上限定，這依然是個(gè)歷史性的時(shí)刻。因?yàn)?HTML 恰恰是傳統(tǒng)網(wǎng)頁(yè)世界最核心的入口。

過(guò)去我們說(shuō)“上網(wǎng)”，本質(zhì)就是人通過(guò)瀏覽器訪問(wèn)網(wǎng)頁(yè)；而現(xiàn)在，這個(gè)入口不再主要由人類打開(kāi)。越來(lái)越多網(wǎng)頁(yè)，是被爬蟲(chóng)、監(jiān)控腳本、AI 抓取器，以及正在興起的 AI Agent 打開(kāi)的。

1 Bot 超過(guò)人類，不是終點(diǎn)，而是開(kāi)場(chǎng)

Bot 不是新玩意。搜索引擎爬蟲(chóng)、安全掃描腳本、價(jià)格監(jiān)控，早就構(gòu)成了互聯(lián)網(wǎng)的暗流。今天真正的新變化，不是“有 Bot 了”，而是 Bot 的角色變了。

過(guò)去的 Bot，更多在為系統(tǒng)服務(wù)——抓取、索引、監(jiān)控，任務(wù)清晰，邊界穩(wěn)定。但 Agent 出現(xiàn)后，Bot 開(kāi)始代表人的意圖行動(dòng)。

一個(gè)購(gòu)物 AI 不只是看價(jià)格，它會(huì)比較平臺(tái)、篩除差評(píng)、核對(duì)優(yōu)惠券，甚至結(jié)賬；一個(gè)旅行 Agent 不僅搜航班，還會(huì)對(duì)比酒店、查庫(kù)存、預(yù)訂行程；研究 Agent 則能連開(kāi)幾十個(gè)網(wǎng)頁(yè)，交叉驗(yàn)證后組織成報(bào)告。

傳統(tǒng)爬蟲(chóng)是在“讀網(wǎng)頁(yè)”，Agent 是在“使用網(wǎng)頁(yè)”。

前者是讀者，后者是代理。它不是替人看一眼，而是替人完成一連串動(dòng)作。也正因如此，Bot 流量超過(guò)人類，并不是 Agent 時(shí)代的終點(diǎn)，而是它全面侵入互聯(lián)網(wǎng)的前奏。

2 8000% 增長(zhǎng)背后：從閱讀走向行動(dòng)

當(dāng)前的 AI 流量里，訓(xùn)練爬蟲(chóng)仍是主力，但結(jié)構(gòu)正在劇變。

HUMAN Security 的 2026 年 AI Traffic 報(bào)告顯示：訓(xùn)練爬蟲(chóng)占比正在下降，而 AI scrapers 增長(zhǎng)了 597%，并且 AI agents 和 agentic browsers 的流量同比暴漲 7,851%！

2025 年自動(dòng)化流量同比增長(zhǎng) 23.51%，是人類流量增速（3.10%）的近 8 倍。其中，AI 驅(qū)動(dòng)流量年內(nèi)增長(zhǎng) 187%。

這說(shuō)明，AI 訪問(wèn)互聯(lián)網(wǎng)的動(dòng)機(jī)變了。

早期 AI 訪問(wèn)網(wǎng)頁(yè)，主要是為了訓(xùn)練，把內(nèi)容抓進(jìn)語(yǔ)料池；后來(lái) AI 搜索興起，需要實(shí)時(shí)抓取和總結(jié)；現(xiàn)在輪到 Agent，它不滿足于把網(wǎng)頁(yè)變成答案，而是要把網(wǎng)頁(yè)變成任務(wù)的一環(huán)。網(wǎng)頁(yè)不再是信息源，而是操作界面。

這也是為什么 AI 流量高度集中在三個(gè)行業(yè)：零售電商、流媒體與媒體、旅游和酒店。

它們的共同點(diǎn)是：信息高度結(jié)構(gòu)化、變化頻繁，且直接連接交易。商品價(jià)格、庫(kù)存、房態(tài)、評(píng)價(jià)，都很適合機(jī)器讀取、比較和行動(dòng)。此時(shí)，網(wǎng)頁(yè)不再是內(nèi)容展示頁(yè)，而變成了機(jī)器決策鏈條里的一個(gè)節(jié)點(diǎn)。

3 以前網(wǎng)站怕沒(méi)人來(lái)，現(xiàn)在怕來(lái)的不是人

過(guò)去，網(wǎng)站最怕沒(méi)流量，所有運(yùn)營(yíng)動(dòng)作都指向“把人引過(guò)來(lái)”。但 Agent 時(shí)代，問(wèn)題變了：網(wǎng)站可能有大量訪問(wèn)，可來(lái)的不是人。

機(jī)器讀完網(wǎng)頁(yè)，提取重點(diǎn)，把結(jié)果直接呈現(xiàn)在 ChatGPT、Perplexity 等入口里。用戶得到了答案，卻未必會(huì)點(diǎn)擊原網(wǎng)頁(yè)。內(nèi)容被消費(fèi)了，流量卻沒(méi)有回來(lái)。

搜索引擎抓網(wǎng)頁(yè)，至少承諾一種交換：我抓你內(nèi)容，給你帶回點(diǎn)擊。AI 入口更狠，它抓取、理解、總結(jié)，最后直接交出答案，原網(wǎng)站淪為模型背后的“隱形供應(yīng)商”。

這正是 Cloudflare 推出 Pay Per Crawl（按爬取付費(fèi)）引發(fā)熱議的原因，它本質(zhì)上是在給“機(jī)器訪問(wèn)內(nèi)容”重新定價(jià)。過(guò)去互聯(lián)網(wǎng)的賬本按人記：UV、PV、DAU、轉(zhuǎn)化率，全默認(rèn)訪問(wèn)者是人。

一旦機(jī)器成為主要訪客，這套賬本就開(kāi)始失靈——機(jī)器能創(chuàng)造訪問(wèn)量，卻不一定創(chuàng)造廣告價(jià)值；能消耗內(nèi)容，卻不一定帶來(lái)品牌認(rèn)知。流量，開(kāi)始不再等于價(jià)值。

4 入口從搜索框，轉(zhuǎn)向模型和 Agent

入口控制權(quán)也在轉(zhuǎn)移。報(bào)告顯示，AI 流量高度集中在少數(shù)平臺(tái)：OpenAI 相關(guān) bots 占比約 69%，Meta 約 16%，Anthropic 約 11%。

PC 時(shí)代網(wǎng)站爭(zhēng)奪 Google 入口，移動(dòng)時(shí)代爭(zhēng)奪 App 和信息流，Agent 時(shí)代的入口，正集中到少數(shù)模型公司手里。用戶不再自己開(kāi)十個(gè)網(wǎng)頁(yè)比較，而是問(wèn)模型一句話，模型替他篩選、壓縮甚至執(zhí)行。

網(wǎng)站面對(duì)的不再只是 SEO，而是新問(wèn)題：我的網(wǎng)頁(yè) Agent 讀懂嗎？信息模型能信任嗎？服務(wù)機(jī)器能調(diào)用嗎？?jī)?nèi)容被消費(fèi)后能獲回報(bào)嗎？

未來(lái)很多網(wǎng)站會(huì)演變成雙層結(jié)構(gòu)：一層給人看，爭(zhēng)奪注意力；一層給 Agent 讀，爭(zhēng)奪機(jī)器可用性。給人看的需要故事、視覺(jué)、停留時(shí)間；給機(jī)器看的需要結(jié)構(gòu)、權(quán)限、接口和責(zé)任邊界。

5 流量主體轉(zhuǎn)變的背后

我們看到，當(dāng)互聯(lián)網(wǎng)的流量主體從人變成 Agent，隨即也帶動(dòng)了三個(gè)層面的深層變化：

網(wǎng)頁(yè)變了，從供人閱讀的信息源，變成供機(jī)器執(zhí)行的操作界面；價(jià)值變了，從基于人類注意力的變現(xiàn)，轉(zhuǎn)向基于機(jī)器調(diào)用的定價(jià)；入口變了，從搜索框的分發(fā)，轉(zhuǎn)向大模型的一言而決。

57.5% 遠(yuǎn)不是終點(diǎn)，很有可能只是一個(gè)開(kāi)始，是互聯(lián)網(wǎng)從“人類的瀏覽場(chǎng)”走向“機(jī)器的執(zhí)行場(chǎng)”的起跑線。人依然是意圖的源頭和價(jià)值的終點(diǎn)，但中間的觸達(dá)、交互與交付，正不可逆地交由 Agent 完成。

聲明：本文為 AI 前線原創(chuàng)，不代表平臺(tái)觀點(diǎn)，未經(jīng)許可禁止轉(zhuǎn)載。