无主之地2配置高吗|看真人裸体BBBBB|秋草莓丝瓜黄瓜榴莲色多多|真人強奷112分钟|精品一卡2卡3卡四卡新区|日本成人深夜苍井空|八十年代动画片

網易首頁 > 網易號 > 正文 申請入駐

北航/新國立提出AmbiSuR,重塑高保真3D幾何重建

0
分享至



近年來,3D 高斯潑濺(3D Gaussian Splatting, 3DGS)憑借其卓越的新視角合成能力和實時的渲染效率,極大地推動了神經渲染技術的發展。然而,當研究者試圖直接從 3DGS 中提取精確的 3D 幾何表面(Mesh 等)時,往往會面臨嚴重的幾何失真問題。正如論文所指出的,由于混合過程缺乏約束,模型極易出現過度重建(over-reconstruction)和惡性的幾何重疊,生成由冗余基元構成的病態幾何。模型往往是在利用這些錯亂的冗余基元和復雜的遮擋關系來強行模擬視點相關的光影效果,而非恢復出明確的物理表面。

導致這一現象的核心瓶頸,在于現實物理世界中普遍存在的光度多義性(Photometric Ambiguity)。在弱紋理、高光反射或視點遮擋等區域,僅憑多視角的光度一致性并不足以收斂出唯一確定的幾何解,導致優化極易陷入 “幾何過擬合”。現有方法大多依賴多次光線傳播建模,但只作用于反射等部分區域;或全局引入深度等外部先驗來進行正則化,這不僅容易引入先驗模型本身的誤差,還會削弱 3DGS 在紋理豐富區域的高頻細節表達能力。

為了從根本上緩解這一痛點,北京航空航天大學與新加坡國立大學等學術機構的百曉 & Gim Hee Lee 研究團隊在論文 ”Revisiting Photometric Ambiguity for Accurate Gaussian-Splatting Surface Reconstruction” 中提出了全新的AmbiSuR框架。該研究回歸表征基礎,深入剖析了 3DGS 內部的基元級多義性,并首次論證了球諧函數(Spherical Harmonics, SH)在高斯濺射中作為 “多義性自指示器” 的可行性與內在潛能。方法具有高度通用性,保持架構與先驗類型無關。

該論文現已被 ICML 2026 接收,代碼已開源。

本文第一作者為李嘉禾為北京航空航天大學計算機學院博士研究生,目前于新加坡國立大學 Gim Hee Lee 團隊進行訪問,主要研究方向為計算機三維視覺。通訊作者為北京航空航天大學計算機學院百曉教授和鄭錦副教授。



  • 論文標題:Revisiting Photometric Ambiguity for Accurate Gaussian-Splatting Surface Reconstruction
  • 論文鏈接:https://arxiv.org/abs/2605.12494
  • 項目主頁:https://fictionarry.github.io/AmbiSuR-Proj/
  • 代碼倉庫:https://github.com/Fictionarry/AmbiSuR

一、 溯源:3DGS 表面重建面臨的表征與監督雙重多義性

AmbiSuR 團隊從基礎原理出發,系統審視了 3DGS 在表面重建中遭遇的光度多義性,指出其來源于表征(Representation)和監督(Supervision)兩個維度的缺陷與挑戰:



圖 1:表征與監督多義性及方法流程

1. 表征層面的多義性(Representational Ambiguities)

通過對優化梯度的定量分析,團隊指出了傳統 3DGS 基元在幾何成型時固有的兩個結構性缺陷:

1)基元邊緣多義性(Primitive Edge Ambiguity): 高斯基元的空間分布帶有面積龐大但低不透明度的邊緣。分析表明,高斯基元的核心區域主導了對光度誤差的擬合,而廣大的邊緣區域只能接收到極弱的梯度反饋。這種結構性偏差導致基元為了擬合核心區域的誤差,其邊緣區域會產生不受控的過度膨脹,進而在弱約束區域引發嚴重的幾何污染和粘連。

2)光度混合多義性(Photometric Blending Ambiguity):3DGS 的渲染是基于 Alpha 混合(Alpha-blending)的像素級積分。對于反演明確的物理表面而言,單一像素的顏色監督是一個典型的不適定問題。優化器傾向于用冗余的病態基元層疊來擬合目標像素的顏色(即利用復雜的遮擋關系來模擬視點相關的效果),而不是重建出具有一致性光學屬性的確切表面。

2. 監督層面的多義性(Supervisory Ambiguities)

即使通過技術手段修復了表征層面的缺陷,3DGS 依然需要面對現實世界中不完美的監督信號。在真實場景中,由于反光、無紋理區域、視角覆蓋不足或光照變化,多視角光度的一致性往往被打破。這些誤導性的監督信號會迫使優化過程陷入妥協。

此外,當面對沖突的光度約束時,3DGS 無法單純依靠優化幾何屬性來降低損失,便會利用高自由度的視點相關參數(如球諧函數)來強行擬合這些殘差。這導致幾何誤差或錯誤的外觀被烘焙進了模型的顏色表達中,從而允許生成錯誤的幾何結構

二、 核心解法:AmbiSuR 的雙階段干預機制

針對上述問題,AmbiSuR 提出了由內而外的兩步解決方案:

1. 表征層面:光度消歧模塊(Photometric Disambiguation)

1)高斯基元截斷(Gaussian Primitive Truncation):作者采用了一種直接的統計截斷方法。利用標準差界定核心邊界(論文中設定邊界距離為 2 倍標準差),在計算渲染不透明度時,直接舍棄邊緣區域,僅保留核心區域的貢獻。這一操作從機制上切斷了弱梯度帶來的膨脹偏差,迫使基元保持緊湊。



圖 2:高斯基元截斷效果

2)光線 - 顏色一致性(Ray-Color Consistency):為打破顏色混合的不適定性,研究團隊引入了基于射線的統計約束。他們計算了沿射線的發射顏色相對于混合期望顏色的加權方差。該損失項強制同一物理表面交點處的基元必須具備高度相似的光學屬性,從而有效抑制了冗余偽影的生成。



圖 3:光線 - 顏色一致性效果

2. 監督層面:球諧函數多義性指示(SH Ambiguity Indication)

這是本工作的一項關鍵洞察。作者指出,3DGS 中用于擬合視點相關(View-dependent)顏色的高階球諧函數系數,天然具備量化光度多義性的能力。

基于球面積分的特性,視點相關的顏色方差與高階 SH 系數的平方和成正比。因此,作者定義了多義性指示器 I_SH,經推導可直接等價于高階 SH 系數的模長。

在此基礎上,AmbiSuR 設計了雙端指示(Dual-End Indication)機制:

1)上端指示(Upper Indicator): I_SH 指標處于頂部百分位(如前 5%)的基元,說明其在不同視角下受到了強烈沖突的約束,往往對應錯誤的幾何突變或極具挑戰的強反光區域。

2)下端指示(Lower Indicator): 反直覺地是,該工作分析得出并由實驗驗證,在優化過程中,I_SH 處于底部百分位(如后 10%)通常也意味著該區域缺乏足夠的光度監督信號,而通常并非理想的 non-Lambertian 表面(具體內容可由稀疏性推導得出,詳見論文)。這使得下端指示同樣成為有力的指示器。



圖 4:球諧函數多義性指示效果

通過動態鎖定這些高風險的基元集合,AmbiSuR 構建了參數級細粒度的無定形局部正則化器(Amorphous Local Regularizer)。它僅針對這些多義性基元施加由深度圖導出的法線先驗進行約束,并在微調時凍結其縮放和不透明度參數。這種精細化的局部干預,在利用先驗引導修正錯誤幾何的同時,充分保護了 3DGS 在紋理清晰區域的高頻細節。

為了證明該框架卓越的適用性與通用性,研究團隊在上述核心機制的基礎上,提出了兩種模型變體:1)標準 AmbiSuR: 引入多視角深度(Multi-view Depth)作為幾何先驗,并通過其導出的點云進行模型初始化,旨在探索表面重建精度的最強性能上限。2)單目變體 AmbiSuR-Mono: 結合極易獲取且魯棒的單目深度(Monocular Depth)先驗,并采用傳統的 SfM 稀疏點云進行初始化。

實驗證明 AmbiSuR 無論在擁有精確多視角幾何信息的理想場景下,還是在僅能提取基礎單目深度線索的受限環境中,都能展現出強大的兼容性與廣泛的落地潛力。

三、 實驗驗證:跨越多種表征的全面領先

研究團隊在 DTU、Tanks and Temples (TnT) 以及 Mip-NeRF 360 多個標準數據集上對 AmbiSuR 進行了嚴格評估,結果證明其在精度、細節還原度以及魯棒性上均表現卓越。

1. 定量評估

在表面重建的兩大核心指標上,AmbiSuR 均取得了優異成績:

DTU 數據集:無論是使用度量深度的標準版還是使用單目深度的 AmbiSuR-Mono,其在倒角距離(Chamfer Distance)上均達到了最優水平0.46。它不僅超越了經典的隱式方法(如 Neuralangelo),也優于當前基于體素的最前沿方法 GeoSVR,證明了其在處理精細幾何時的優越性。



圖 5:DTU 數據集重建結果

Tanks and Temples 數據集:在包含真實世界復雜光照和大規模場景的 TnT 測試中,AmbiSuR 在 F1-score 指標上全面勝出(0.5760.589)。即使面對尺度模糊的單目先驗或精度有限的度量先驗,AmbiSuR 依然能保持穩健的高精度重建,超越了帶有深度先驗的 MILo 和 GeoSVR 等強基線方法。



圖 6:TnT 數據集重建結果

值得一提的是,方法在使用當前非 SOTA backbone PGSR 的情況下,指標性能實際追平甚至超越 GGGS、GaussianWrapping 等同期或更新方法,且方法本身高度架構無關,展現出強大性能潛力。

2. 定性對比

通過對比重建的 Mesh 模型,可以清晰看到 AmbiSuR 的優勢:消除幾何崩塌:在反光和紋理稀疏區域,傳統 3DGS 方法往往會生成混亂的過度重建表面來湊數,而 AmbiSuR 能夠重建出平滑且符合物理邏輯的表面。細節高度還原:對于形狀復雜的物體,AmbiSuR 展現了極強的細節捕捉能力,其提取的 Mesh 邊緣銳利且表面紋理清晰,避免了其他方法常見的過度平滑或幾何塌陷問題。現實世界重現:在無邊界數據集重建方面,AmbiSuR 同樣在 Mip-NeRF 360 數據集上表現良好。在未引入復雜光反射機制的情況下,對于反光及弱紋理表面等區域展現出強魯棒性。





圖 7:定性重建結果



視頻鏈接:https://mp.weixin.qq.com/s/jiqj2afGW40LWolVmO9-TA?click_id=36

3. 消融研究

深入的消融實驗驗證了 AmbiSuR 核心設計的必要性:基元截斷:實驗顯示,單純引入基元截斷策略,即使不進行重新訓練,也能顯著提升表面的幾何清晰度。它有效解決了基元邊緣過度膨脹導致的幾何污染。光線 - 顏色一致性:該模塊有效抑制了基元在混合時的屬性發散。在透明和強反射表面的測試中,成功防止了模型通過產生過度重建表面來欺騙光度損失,從而恢復出正確的實體幾何。球諧函數指示器:對比全局施加先驗的平庸方案,基于 SH 指標的局部正則化方案在提升精度的同時,避免了對已重建良好區域的負面干擾。



圖 8:消融實驗定量結果

總結

AmbiSuR 在當前 3D 表面重建研究普遍著重于提升底層 Gaussian Splatting 及表面表征方式的背景下,重新向社區點明了探討 “光度多義性 “這一根本性瓶頸的重要價值。作為解決方案,該工作選擇向內挖掘 3DGS 自身表征的物理與統計學潛能。通過將球諧函數從單一的顏色擬合器拓展為 “多義性自指示器”,并輔以極簡的基元截斷與光線一致性約束,AmbiSuR 從根本上提出了一種自洽的內生消歧框架,無需復雜堆疊、高度兼容現有架構,不僅在各項標準基準上全面刷新了重建精度,也為未來提升神經渲染的幾何穩健性與可解釋性,提供了一條啟發性的新路徑。

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
外媒議論“懂王他們在中國彬彬有禮”,日網民也看到了

外媒議論“懂王他們在中國彬彬有禮”,日網民也看到了

這里是東京
2026-05-18 17:48:37
李冰冰自曝與妹妹李雪因工作吵架:刪除微信、最長3個多月不說話......

李冰冰自曝與妹妹李雪因工作吵架:刪除微信、最長3個多月不說話......

魯中晨報
2026-05-19 11:30:04
母子同床15年?狄鶯終于將寶貝兒子送進了監獄!

母子同床15年?狄鶯終于將寶貝兒子送進了監獄!

新民周刊
2026-05-18 14:05:28
前車頂住后車后續,央媒點贊,司機身份曝光,東風日產贈車主新車

前車頂住后車后續,央媒點贊,司機身份曝光,東風日產贈車主新車

小蘭聊歷史
2026-05-19 08:35:47
非要如此?主場告別戰險勝降級隊,槍手奪冠末輪已是非勝不可

非要如此?主場告別戰險勝降級隊,槍手奪冠末輪已是非勝不可

濤哥侃球
2026-05-19 15:38:10
央視直播乒乓球時間表:5月19日CCTV播國乒!大滿貫名單正式出爐

央視直播乒乓球時間表:5月19日CCTV播國乒!大滿貫名單正式出爐

八斗小先生
2026-05-19 10:42:24
馬斯克坦言:到上海就像回家,母親早已定居,身價萬億仍拍視頻帶貨

馬斯克坦言:到上海就像回家,母親早已定居,身價萬億仍拍視頻帶貨

青橘罐頭
2026-05-18 14:29:28
離京即反轉!中方清單一出,500架波音落空,美方大單縮水

離京即反轉!中方清單一出,500架波音落空,美方大單縮水

墨羽怪談
2026-05-18 23:08:23
蔡卓妍:全部都是假的!

蔡卓妍:全部都是假的!

都市快報橙柿互動
2026-05-19 14:19:37
降價2000元后 蘋果iPhone 17系列拿下618單品銷量前三

降價2000元后 蘋果iPhone 17系列拿下618單品銷量前三

CNMO科技
2026-05-19 10:23:33
攔不下特朗普,門縫外面一怨婦

攔不下特朗普,門縫外面一怨婦

南風窗
2026-05-19 13:43:52
逆天續命!39歲瓦爾迪2場2球搶6分,克雷莫內塞1分之差末輪決生死

逆天續命!39歲瓦爾迪2場2球搶6分,克雷莫內塞1分之差末輪決生死

懂個球
2026-05-18 23:59:47
突然爆發,半導體龍頭“20cm”漲停

突然爆發,半導體龍頭“20cm”漲停

數據寶
2026-05-19 15:07:23
被抓、家中金條堆成山,原來王麗坤和車曉是同類人

被抓、家中金條堆成山,原來王麗坤和車曉是同類人

阿傖說事
2026-05-16 15:46:45
Shams:福克斯腳踝扭傷將缺席西決G1馬刺客戰雷霆

Shams:福克斯腳踝扭傷將缺席西決G1馬刺客戰雷霆

懂球帝
2026-05-19 07:46:31
新華鮮報|持續賦能千行百業 中國衛星導航產業產值超6000億元

新華鮮報|持續賦能千行百業 中國衛星導航產業產值超6000億元

新華社
2026-05-18 09:29:27
被嘲諷了50年的弦理論,被科學家用一種近乎“玄學”的方式證明了

被嘲諷了50年的弦理論,被科學家用一種近乎“玄學”的方式證明了

質子視界
2026-05-18 19:54:19
“落后”咋了?捂了大半年,特斯拉用70ms,給國產電動車上了一課

“落后”咋了?捂了大半年,特斯拉用70ms,給國產電動車上了一課

小李車評李建紅
2026-05-17 17:40:03
不能二次加熱的6種食物!醫生提醒:吃不完或倒掉,別亂節儉

不能二次加熱的6種食物!醫生提醒:吃不完或倒掉,別亂節儉

冷眼看世界728
2026-05-12 20:46:26
演員王寧:這輩子我做的最錯誤決定,就是眼紅沈騰,離開開心麻花

演員王寧:這輩子我做的最錯誤決定,就是眼紅沈騰,離開開心麻花

草莓信箱
2026-05-18 22:24:19
2026-05-19 16:07:00
機器之心Pro incentive-icons
機器之心Pro
專業的人工智能媒體
13033文章數 142651關注度
往期回顧 全部

科技要聞

馬斯克敗訴,法院判他起訴OpenAI太晚了

頭條要聞

賴清德"偷渡式"竄訪非洲國家被中國"踢出群" 大使發聲

頭條要聞

賴清德"偷渡式"竄訪非洲國家被中國"踢出群" 大使發聲

體育要聞

文班亞馬1比0雷霆:凌駕MVP的史詩價值

娛樂要聞

姚晨刪博難平眾怒,為什么她還能蹦噠

財經要聞

從賣流量到賣Token,運營商算力生意破局

汽車要聞

德味操控+聰明大腦,與眾07不輸新勢力

態度原創

手機
親子
游戲
房產
家居

手機要聞

Omdia:東南亞智能手機市場2026Q1平均售價同比大增19%

親子要聞

帶娃復查鼻炎腺樣體肥大,還好一切安然無恙,孩子身體無小事早發

520反向送驚喜!索尼PS+再度漲價 引發玩家強烈不滿

房產要聞

7516元/㎡,161套一次全甩!海口住宅最低價出現了!

家居要聞

觀山隱秀 心靈沉淀

無障礙瀏覽 進入關懷版