網易首頁 > 網易號 > 正文 申請入駐

超節點解構:三大核心能力齊聚,才能“像一臺計算機一樣工作”

0
分享至

在AI大模型爆發式發展的今天,“算力”成為數字經濟時代的核心生產力。為了滿足日益增長的算力需求,各類計算節點解決方案層出不窮,“超節點”概念也隨之走紅。真正的超節點需要同時具備大帶寬、低時延和內存統一編址三大核心能力,缺少任何一項,都非革命性的架構創新。

AI技術的飛速演進和行業應用的深度滲透,讓傳統計算架構難以為繼。從技術發展來看,大模型正從單模態向全模態融合跨越,上下文長度從K級邁向兆級,訓練數據規模從10TB升級至100TB,模型迭代速度也從半年縮短至兩個月。而在應用端,金融風控場景要求時延小于20毫秒,反欺詐場景更是低至10毫秒以下,Agentic AI的多任務協同則需要更低時延的計算支撐。這些需求都對算力的有效性和響應速度提出了前所未有的挑戰。

與此同時,摩爾定律的失效讓單一芯片的算力提升陷入瓶頸,大模型的算力需求增長速度遠超芯片技術迭代速度。傳統解決方案是通過服務器堆疊和以太網聯接組建集群,但這種方式存在致命缺陷:服務器間帶寬不足、時延較大,集群規模越大,算力利用率反而越低。Meta公布的Llama 3.1訓練數據顯示,1.6萬卡H100集群的算力利用率偏低,且在54天的訓練中累計中斷419次,平均每3小時就出現一次故障。顯然,簡單的服務器堆疊已經無法滿足AI時代的規模算力供給需求。

真正的超節點,首先要突破傳統架構的通信瓶頸,具備大帶寬和低時延的核心特性。傳統計算架構中,卡間互聯依賴PCIe或以太網,跨服務器互聯帶寬多為200~400Gb/s,時延達數十微秒,在千億參數模型訓練中,頻繁的GB級數據通信會造成嚴重阻塞,讓計算等待通信成為性能瓶頸。而超節點通過高效互聯協議打破了這一限制,以昇騰384超節點為例,其通信帶寬較傳統服務器架構提升15倍,RTT通信時延從7微秒降至3微秒,降低50%以上。



在互聯網行業的實際應用中,這種優勢尤為明顯。面對萬億參數、百萬級序列長度的基礎模型探索,超節點的大帶寬、低時延能力支持TP、CP、EP等多維并行,可將EP從8擴展至64,把不可掩蓋的all2all通信占比從40%降至3.5%,最終實現3倍以上的性能提升。在強化學習場景中,更是能將訓推權重傳輸時間從小時級壓縮至60秒,徹底改變了傳統集群的效率困境。

更關鍵的是,真正的超節點必須具備“內存統一編址”能力,這是實現“One NPU/GPU”的核心前提。傳統集群的通信如同“寄快遞”,需要經過打包數據、填寫地址、發送、簽收拆包等復雜流程,屬于消息語義通信;而內存統一編址則像“從書架上拿書”,超節點內所有設備的內存地址全局唯一,CPU、NPU等計算單元可通過load/store指令直接訪問遠端內存資源,無需復雜的序列化和反序列化流程。

這種內存語義通信帶來了效率的革命性提升。昇騰384超節點通過靈衢協議統一CPU、NPU內存語義,實現DDR和片上內存池化,打造出128TB的全局內存統一編址空間。在推理多輪對話場景中,基于內存語義的KV Cache池化方案支持Prefix Cache復用,在命中率100%時吞吐性能可提升3倍;在推薦系統中,依托內存語義的低時延特性,能有效優化Embedding表的小包傳輸效率。更重要的是,內存統一編址支持“已存代算”,可將暫時不用的數據offload到CPU內存,需要時通過大帶寬、低時延能力快速拉回,使NPU利用率提升10%以上。

反觀市場上一些所謂的“超節點”方案,大多采用PCIe+RoCE協議互聯,本質上仍是傳統服務器堆疊架構。RoCE協議不支持統一內存語義,跨服務器訪存需要RMDA編解碼,算子通信時延大、效率低;PCIe協議則需要經過CPU調度,互聯帶寬遠不能滿足需求,即使是PCIe6.0單lane僅64GB/s,且無法支持大規模直聯的高效訪問。這類方案不僅跨服務器帶寬、時延受限,更關鍵的是不支持內存統一編址,無法實現全局內存池化和設備間直接訪問,所有訪存都依賴消息語義通信,優化空間存在天然瓶頸。

事實上,真正可商用的超節點是一項系統工程,需要“互聯協議+工程能力+系統能力”的三重支撐。除了大帶寬、低時延、內存統一編址的互聯協議核心,還需要成熟的散熱技術、模塊化架構、冗余能力、連接技術和供電能力作為工程保障,同時具備大規模部署、高可靠性和靈活切分的系統能力。

昇騰384超節點就是典型代表,其已經實現了從技術概念到規模商用的完整落地,自 2025 年正式上市以來,已規模部署超550 套,廣泛應用于互聯網、金融、能源、港口、制造等多個領域。



更重要的是,靈衢2.0協議的全面開放,為超節點技術的普及與生態共建注入了關鍵動能。作為支撐真超節點內存統一編址與高效互聯的核心協議,靈衢2.0不僅在技術上實現了突破,更通過全維度開放,推動全行業形成統一的技術標準,有望讓超節點加速走向規模化、普惠化。

值得關注的是,華為還將智能計算的超節點技術引入通用計算,成為全球首家發布通算超節點的廠商。在搜推廣場景中,超節點的低時延能力可幫助客戶提升廣告收入;在數據庫場景中,內存池化能力能有效解決分庫分表等問題,為通用計算領域帶來新的突破。

總而言之,在AI算力需求持續爆發的當下,超節點已經成為突破算力瓶頸的核心解決方案,一個方案是否為真正的超節點,關鍵看是否同時具備大帶寬、低時延和內存統一編址三大核心能力,具備了這三點,多個物理結算節點高速互聯,才能“像一臺計算機一樣工作”。

可以相信,超節點這樣的核心技術,將能為大模型發展和行業智能化轉型提供堅實支撐,為AI大模型發展與千行百業的智能化轉型提供堅實算力底座。

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
內幕曝光!伊朗通報,談判團差點被“團滅”,全程連電話都不敢打

內幕曝光!伊朗通報,談判團差點被“團滅”,全程連電話都不敢打

書紀文譚
2026-04-20 19:23:31
季后賽挑對手的下場!本以為挑到軟柿子,結果現在0-2快被橫掃了

季后賽挑對手的下場!本以為挑到軟柿子,結果現在0-2快被橫掃了

你的籃球頻道
2026-04-21 10:53:16
附加賽廣東牌運最差!浙江最舒服,8、9名最燙手,遼寧迎關鍵抉擇

附加賽廣東牌運最差!浙江最舒服,8、9名最燙手,遼寧迎關鍵抉擇

后仰大風車
2026-04-21 09:45:08
國務院最新任命:呂武欽任公安部部長助理

國務院最新任命:呂武欽任公安部部長助理

上觀新聞
2026-04-21 11:38:10
保密期限終到期,中央首長透露:毛岸英真相,可以向外界公開了

保密期限終到期,中央首長透露:毛岸英真相,可以向外界公開了

歷史點行
2026-03-29 13:38:28
網友爸爸2年前垃圾堆里撿回72條32GB DDR4內存:如今價值近14萬

網友爸爸2年前垃圾堆里撿回72條32GB DDR4內存:如今價值近14萬

快科技
2026-04-20 10:51:04
身家一年暴漲560億元成“惠州首富” 勝宏科技創始人陳濤:加速擴充高端產能

身家一年暴漲560億元成“惠州首富” 勝宏科技創始人陳濤:加速擴充高端產能

每日經濟新聞
2026-04-21 11:13:18
樹倒猢猻散!武亮直播哭紅眼眶,20余天的人事動蕩,讓他心力憔悴

樹倒猢猻散!武亮直播哭紅眼眶,20余天的人事動蕩,讓他心力憔悴

火山詩話
2026-04-20 06:31:57
金像獎狂攬八獎,導演麥浚龍計劃推出5.5小時版《風林火山》

金像獎狂攬八獎,導演麥浚龍計劃推出5.5小時版《風林火山》

導筒directube
2026-04-21 11:32:13
醪糟再次被關注!醫生發現:高血脂患者喝醪糟,不用多久4大變化

醪糟再次被關注!醫生發現:高血脂患者喝醪糟,不用多久4大變化

芹姐說生活
2026-04-19 15:52:53
他從正部降到副廳,級別恢復后不想上任,宋任窮:這是中央的決定

他從正部降到副廳,級別恢復后不想上任,宋任窮:這是中央的決定

鑒史錄
2026-04-20 20:54:57
斯諾克世錦賽:3冠王第6局只進1球!小特81-5止損,拒絕連輸3局!

斯諾克世錦賽:3冠王第6局只進1球!小特81-5止損,拒絕連輸3局!

劉姚堯的文字城堡
2026-04-21 19:26:12
周亮,被免職

周亮,被免職

新京報政事兒
2026-04-21 10:28:07
今日最慘股當屬這只券商股,連續下跌7個月后,今又閃崩跌停!

今日最慘股當屬這只券商股,連續下跌7個月后,今又閃崩跌停!

丁丁鯉史紀
2026-04-21 16:15:57
好詭異的景象!科學家:土衛六上存在“慢速推進的巨浪”

好詭異的景象!科學家:土衛六上存在“慢速推進的巨浪”

星空天文
2026-04-21 19:49:26
蘋果或后悔將工廠從中國遷至印度!印度加快裁決,擬重罰380億

蘋果或后悔將工廠從中國遷至印度!印度加快裁決,擬重罰380億

丁丁鯉史紀
2026-04-21 14:04:07
71.5%!歷史性暴跌,以貸養貸的泡沫崩了

71.5%!歷史性暴跌,以貸養貸的泡沫崩了

月滿大江流
2026-04-16 13:54:38
世錦賽戰報:六冠王7-10出局,16強決出7席中國3席!中國冠軍1-8

世錦賽戰報:六冠王7-10出局,16強決出7席中國3席!中國冠軍1-8

求球不落諦
2026-04-21 00:55:34
恒大集團許家印牽連的12個女人

恒大集團許家印牽連的12個女人

地產微資訊
2026-04-21 17:02:14
77年高考第1位女狀元,語文差1分到100,49年過去了她過得還好嗎

77年高考第1位女狀元,語文差1分到100,49年過去了她過得還好嗎

尋墨閣
2026-04-21 02:45:18
2026-04-21 20:27:00
閆躍龍 incentive-icons
閆躍龍
剖析互聯網+帶來的行業變局
1571文章數 1197關注度
往期回顧 全部

科技要聞

創造4萬億帝國、訪華20次,庫克留下了什么

頭條要聞

挪用1700萬打賞主播女生已自首 警方:能否立案需調查

頭條要聞

挪用1700萬打賞主播女生已自首 警方:能否立案需調查

體育要聞

62歲,成為中國足壇最火的人

娛樂要聞

周潤發時隔16年再賣樓,變現數億資產

財經要聞

現實是最大的荒誕:千億平臺的沖突始末

汽車要聞

全新坦克700正式上市 售價42.8萬-50.8萬元

態度原創

游戲
房產
教育
健康
手機

CS2最大一次史詩級更新來了!底層系統徹底重構

房產要聞

年薪40-50萬!海南地產圈還在猛招人

教育要聞

26屆高考生狂喜吧!截至目前,高考已有6個好消息!家長考生了解

干細胞抗衰4大誤區,90%的人都中招

手機要聞

小米17 Pro Max更新澎湃OS 3.0.306體驗:不吐不快,說說真實感受

無障礙瀏覽 進入關懷版