網易首頁 > 網易號 > 正文 申請入駐

字節要被取代了,取代它的是 Token

0
分享至


字節要被取代了,取代它的是 token。

Karpathy 昨天在推上回了 Python 之父 Guido 一句話:

LLM = CPU,Agent = 操作系統內核。

但他補了一個很關鍵的細節:

LLM 處理的數據單位不是字節,是 token。

這個操作系統的運行方式不是確定性的,而是統計性的。

這是一種底層計算的范式轉移。

過去六十年,計算機的世界建立在字節上。

一個字符 8 個 bit,精確,確定,不會出錯。你寫一個 1,存進去就是 1,讀出來還是 1。

整個互聯網、所有軟件、所有數據庫,都建立在這種確定性上。

現在 LLM 來了。它的基本單位是 token,不是字節。

token 是模糊的,一個詞可能是一個 token,也可能被拆成兩個。

它的輸出是概率性的,同一個輸入跑兩遍可能得到不同的結果。

這就像從牛頓力學進入量子力學。

精確讓位于概率,確定讓位于統計。

Karpathy 把 LLM 比作 CPU,Agent 比作操作系統內核。

如果順著這個類比往下推:

傳統計算機:CPU 處理字節 → 內核調度進程 → 操作系統服務用戶

AI 時代:LLM 處理 token → Agent 編排任務 → AI OS 服務用戶

底層的數據單位變了,上面的一切都得跟著變。

操作系統要重寫,軟件要重做,人和計算機的交互方式要重新設計。

與其說是對上一代的升級,不如說是徹底換了軌道。

字節的世界里,誰掌握更多的數據(字節)誰就贏。

token 的世界里,誰掌握更多的 token 誰就贏。

字節的時代屬于互聯網,token 的時代屬于 Agent。

BYTE ERA ? TOKEN ERA


特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
為什么意大利人從來不換車?還有1000萬人開著老舊汽車

為什么意大利人從來不換車?還有1000萬人開著老舊汽車

意大利華人網0039
2026-04-28 00:07:05
2026年江蘇部分企退人員養老金補發開始,有人多領300,了解一下

2026年江蘇部分企退人員養老金補發開始,有人多領300,了解一下

小彬說事
2026-04-30 11:07:20
特朗普批評鮑威爾將繼續留在美聯儲的決定

特朗普批評鮑威爾將繼續留在美聯儲的決定

財聯社
2026-04-30 06:10:24
廣東男籃今日最新動態!老板親自到場激勵球員,徐杰深夜發聲,焦泊喬缺席原因曝光

廣東男籃今日最新動態!老板親自到場激勵球員,徐杰深夜發聲,焦泊喬缺席原因曝光

凱豐侃球
2026-04-30 09:08:58
烏克蘭的艱苦歲月:610億美元到900億歐元

烏克蘭的艱苦歲月:610億美元到900億歐元

書生論劍
2026-04-29 06:48:54
世界第8淘汰3名中國人!趙心童不服:他的開球讓比賽沒法順暢進攻

世界第8淘汰3名中國人!趙心童不服:他的開球讓比賽沒法順暢進攻

念洲
2026-04-30 07:05:31
曝前央視主持人郎永淳退休工資5萬!本人發聲回應,妻子才3000多

曝前央視主持人郎永淳退休工資5萬!本人發聲回應,妻子才3000多

裕豐娛間說
2026-04-29 09:30:29
罰球不少,里夫斯16中4&三分8中2&罰球13中12取22分4板6助

罰球不少,里夫斯16中4&三分8中2&罰球13中12取22分4板6助

懂球帝
2026-04-30 13:22:08
蔚來練就爆款秘籍:15.98萬起的樂道L80,讓市值一夜暴漲百億

蔚來練就爆款秘籍:15.98萬起的樂道L80,讓市值一夜暴漲百億

超電實驗室
2026-04-29 18:39:51
誤把烏克蘭當伊朗,特朗普出現口誤

誤把烏克蘭當伊朗,特朗普出現口誤

參考消息
2026-04-30 11:56:19
毛澤東談遵義會議——“實際上張聞天當召集人,我管事”

毛澤東談遵義會議——“實際上張聞天當召集人,我管事”

史不語
2026-04-30 10:55:07
體壇反腐直擊金牌項目,張軍落馬引發“地震”!奧運冠軍非護身符

體壇反腐直擊金牌項目,張軍落馬引發“地震”!奧運冠軍非護身符

中國足球的那些事兒
2026-04-29 18:25:26
俄高層攤牌了,提議恢復蘇聯舊制,向全國交底:必須重返戰時軌道

俄高層攤牌了,提議恢復蘇聯舊制,向全國交底:必須重返戰時軌道

潮鹿逐夢
2026-04-29 01:17:49
工商銀行、農業銀行、建設銀行、中國銀行、郵儲銀行、交通銀行,集體公告!

工商銀行、農業銀行、建設銀行、中國銀行、郵儲銀行、交通銀行,集體公告!

每日經濟新聞
2026-04-30 11:29:09
西方害怕中國治沙?《自然》新評揭開真相:他們怕的并非沙漠消失

西方害怕中國治沙?《自然》新評揭開真相:他們怕的并非沙漠消失

生活的哲學
2026-04-29 06:41:35
搬起石頭砸自己的腳,哈馬斯徹底出局,加沙18年統治正式落幕

搬起石頭砸自己的腳,哈馬斯徹底出局,加沙18年統治正式落幕

荷蘭豆愛健康
2026-04-29 14:33:17
伊朗將遭空襲小學列為國家級歷史遺跡

伊朗將遭空襲小學列為國家級歷史遺跡

澎湃新聞
2026-04-29 20:09:03
照方抓藥!火箭沿用8人輪換勝湖人!5首發得分上雙,2陣沒拖后腿

照方抓藥!火箭沿用8人輪換勝湖人!5首發得分上雙,2陣沒拖后腿

熊哥愛籃球
2026-04-30 13:18:59
你的身邊有沒有讓你三觀盡毀的事?看完網友分享簡直大開眼界了!

你的身邊有沒有讓你三觀盡毀的事?看完網友分享簡直大開眼界了!

夜深愛雜談
2026-04-30 07:20:32
在清朝,皇帝從北京出發,去一趟承德避暑山莊,到底要多長時間?

在清朝,皇帝從北京出發,去一趟承德避暑山莊,到底要多長時間?

雍親王府
2026-04-28 17:55:03
2026-04-30 13:48:49
有機大橘子
有機大橘子
AIGC 一線信息
22文章數 5關注度
往期回顧 全部

科技要聞

四巨頭財報齊發:AI已經不只是風口

頭條要聞

"上海最通透爸爸"去世 女兒:他退休20多年這輩子不虧

頭條要聞

"上海最通透爸爸"去世 女兒:他退休20多年這輩子不虧

體育要聞

騎士天王山:哈登、莫布里和……施羅德?

娛樂要聞

孫楊媽媽被曝!過往言行被扒大開眼界

財經要聞

安世之亂,聞泰帝國近黃昏?

汽車要聞

上汽一季報出爐 在低增長周期里守住基本盤

態度原創

時尚
教育
藝術
健康
手機

春季穿衣千萬別太暗沉!試試藍白配色、選基礎款褲子,大方得體

教育要聞

一文讀懂!2026年北京中招特長生政策出爐

藝術要聞

安東·愛德華·基爾德魯普:19世紀丹麥風景畫家

干細胞治燒燙傷能用了么?

手機要聞

報告稱美國三星手機投保維修費用比蘋果iPhone高60%

無障礙瀏覽 進入關懷版