網易首頁 > 網易號 > 正文 申請入駐

MIT團隊給機器人裝上透視眼,藏在紙箱里的東西也能看見

0
分享至

你知道嗎?機器人已經可以看穿紙箱和繞過遮擋物。它能提前知道紙箱里面裝了什么,或能幫助網購用戶實現隔箱驗貨,不用再擔心快遞盒子拆開之后難退貨;掃地機器人也能提前知道自己身后是否藏著雜物,從而能夠繞道作業。

這些功能的實現基于美國麻省理工學院團隊的一系列新成果。他們使用毫米波信號加上最新的AI,造出了一套叫 Wave Former 的系統。這套系統能穿透紙板、塑料、干墻、布料,看見被完全遮擋的物體,還能把物體的完整形狀重建出來。


(來源:相關論文)

他們還有另一套叫 RISE 的系統,能利用房間里走動的人,反推出整個房間的布局。

這兩項研究的主要作者之一都是 Laura Dodds,她是 MIT 媒體實驗室的研究助理。兩篇論文都已被 IEEE 計算機視覺與模式識別會議接收。


圖 | Laura Dodds(來源:GitHub)

他們用毫米波雷達,就是那種和 Wi-Fi 用相同頻段的無線電波來照亮遮擋物后面的物體。毫米波能穿透普通材料,打到物體上再彈回來,就像聲吶和雷達的原理一樣。

但這里有一個大麻煩,毫米波的反射方式跟光不一樣。光照到粗糙表面會向四面八方散開,所以相機能拍到物體的各個面。毫米波卻像鏡子,只有正好朝向雷達的那一小塊表面會把信號彈回來,其他部分會把信號彈向別處。

所以傳統方法只能看到物體的正面,側面和背面完全看不見,就像你站在鏡子前只能看見自己的臉,看不見后腦勺。


(來源:相關論文)

Wave Former 的妙處在于,它先用物理學方法從毫米波信號里拼出一塊不完整的拼圖,然后用生成式 AI 把這個拼圖補全。但這又引出一個新問題,AI 需要海量數據訓練,可毫米波數據少得可憐,根本不夠用。

研究團隊的解決辦法非常聰明,他們從現有的計算機視覺數據集里找圖像,把那些圖像改造成毫米波反射的樣子。比如,他們故意讓圖像只保留正面部分,再把其他面隨機去掉,再往里面加模擬的噪聲,讓這些假數據看起來和真實的毫米波反射一模一樣。

然后用這些數據訓練一個叫 PoInTr 的 AI 模型,讓它學會從殘缺的拼圖里猜出完整形狀。

整套系統分三步走。

第一步,毫米波雷達掃描物體,生成一堆候選表面,每個候選表面都是一種可能的猜測。

第二步,把這些猜測喂給訓練好的 AI 模型,讓模型補全形狀。

第三步,從這些補全后的形狀里挑一個最好的。他們用了一個叫熵的指標,熵越高意味著越亂越不可靠,他們選熵最低的那個,也就是最整齊最合理的那個形狀。

實驗里,他們用了 61 種日常物品做測試,從罐頭、盒子到扳手、電鉆,全部藏在紙板箱或布料后面。Wave Former 的召回率達到了 72%,比第二名高出一大截,而且精準度保持 85%。

這意味著它不僅能找到大部分物體,而且找得準。他們還特意測試了極端情況,當雷達只能看到 18% 的物體表面時,其他方法已經徹底蒙圈,Wave Former 依然能還原出大致形狀,誤差比對手小了 20%。


(來源:相關論文)

第二項研究 RISE 利用房間里走動的人來重建整個房間的布局。原理是人走路的時候會激發多徑反射,信號先打到人身上,再彈到墻上,再彈回雷達,這些鬼影信號平時都被當成噪聲扔掉,但它們其實攜帶著墻壁和家具的信息。Dodds 告訴媒體,通過分析這些反射隨時間的變化,就能粗略理解周圍環境。


(來源:相關論文)

他們用同樣的思路來訓練 AI,先造出一堆模擬的多徑反射數據,教 AI 理解鬼影和房間布局之間的關系。

測試時,他們讓真人拿著雷達在11種不同房間里走了 100 條路線,生成了 5 萬幀數據。RISE 系統把房間布局的重建誤差從 40 厘米降到了 16 厘米,比對手精準了 60%。它還能同時檢測出桌子、柜子、沙發這些家具,交并比達到了 58%。

該團隊的負責人、麻省理工學院 Fadel Adib 教授說,他們花了十幾年研究怎么讓機器人看見遮擋物后面的東西,之前的方法受限于物理原理,精度總提不上去。現在他們用生成式 AI 終于跨過了這道坎,從填補看不見的縫隙到理解整個場景,這是一次質的飛躍。

這套系統目前還依賴真人走動來激發多徑反射,如果房間完全沒人就失效了。而且毫米波對金屬和很厚的墻無能為力。

研究團隊下一步要造出專門針對無線信號的基礎模型,希望能像 ChatGPT 那樣通用,到那時候預計隨便一個 Wi-Fi 路由器就能看見整個屋子。

參考資料:

相關論文https://arxiv.org/pdf/2511.14019和https://arxiv.org/pdf/2511.14152

https://news.mit.edu/2026/generative-ai-improves-wireless-vision-system-sees-through-obstructions-0319

https://news.mit.edu/2025/new-imaging-technique-reconstructs-hidden-object-shapes-0701

https://laura-dodds.github.io/

運營/排版:何晨龍

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
浦東機場登機前連遇兩次求助,女子察覺異常,查詢后瞬間頭皮發麻

浦東機場登機前連遇兩次求助,女子察覺異常,查詢后瞬間頭皮發麻

北緯的咖啡豆
2026-04-20 17:05:15
老板娘穿泳衣泡溫泉,問我行不行?

老板娘穿泳衣泡溫泉,問我行不行?

飛娛日記
2026-03-27 10:55:07
馬庫斯專攻嬸嬸,又泡上羅德曼前妻,喬丹瑟瑟發抖:我也有前妻

馬庫斯專攻嬸嬸,又泡上羅德曼前妻,喬丹瑟瑟發抖:我也有前妻

阿廢冷眼觀察所
2026-04-20 12:21:15
神秘消失數月后突然現身!美國最頭疼的人,悄悄到了巴格達

神秘消失數月后突然現身!美國最頭疼的人,悄悄到了巴格達

菁菁子衿
2026-04-19 19:41:04
珍妮:我希望看到詹姆斯身披湖人戰袍退役 但決定權在他自己手上

珍妮:我希望看到詹姆斯身披湖人戰袍退役 但決定權在他自己手上

羅說NBA
2026-04-20 22:18:47
5049 元的 iPhone Air 上架!太離譜了

5049 元的 iPhone Air 上架!太離譜了

花果科技
2026-04-19 22:38:08
網友喊話讓何潤東代言霸王茶姬,此前他已接到多個商務合作,最近30天抖音漲粉近200萬,品牌客服回應

網友喊話讓何潤東代言霸王茶姬,此前他已接到多個商務合作,最近30天抖音漲粉近200萬,品牌客服回應

極目新聞
2026-04-19 17:19:41
特朗普稱其女婿及美國總統特使將參與美伊談判

特朗普稱其女婿及美國總統特使將參與美伊談判

新京報
2026-04-19 21:44:09
巴塞羅那準備犧牲未來換即戰力

巴塞羅那準備犧牲未來換即戰力

格斗社
2026-04-20 17:46:25
德國百年巨頭倒下時,浙江修鞋匠花4500萬買下,如今年入70億

德國百年巨頭倒下時,浙江修鞋匠花4500萬買下,如今年入70億

毒sir財經
2026-04-19 22:12:53
準時動手了,7國堵在中國家門口,日艦罕見雙線南下,目標很明確

準時動手了,7國堵在中國家門口,日艦罕見雙線南下,目標很明確

花謝依然美
2026-04-21 00:13:04
記者:狼隊0-4賽后,阿羅科達雷與馬內在更衣室發生肢體沖突

記者:狼隊0-4賽后,阿羅科達雷與馬內在更衣室發生肢體沖突

懂球帝
2026-04-20 11:52:02
聯合國曾預測:中國人口迅速萎縮,將成為全球面對的最大挑戰!

聯合國曾預測:中國人口迅速萎縮,將成為全球面對的最大挑戰!

別人都叫我阿腈
2026-04-20 15:50:15
定居美國13年回國撈金遭驅逐,52歲活成笑話

定居美國13年回國撈金遭驅逐,52歲活成笑話

絢麗的畫卷
2026-02-22 21:36:26
越南百億高鐵訂單給德國,來華體驗12小時高鐵,背后算計太明顯

越南百億高鐵訂單給德國,來華體驗12小時高鐵,背后算計太明顯

混沌錄
2026-04-19 17:27:06
扎心啊!有兒子的家庭,父母要努力掙錢買房買車,網友發帖引共鳴

扎心啊!有兒子的家庭,父母要努力掙錢買房買車,網友發帖引共鳴

火山詩話
2026-04-18 15:06:21
1939年,一名波蘭女孩赤身露體被迫和德軍合影,低著頭一臉羞愧

1939年,一名波蘭女孩赤身露體被迫和德軍合影,低著頭一臉羞愧

浩舞默畫
2026-04-07 09:05:56
1991年,22歲的許晴解開衣襟喂奶,導致電影《狂》被封12年

1991年,22歲的許晴解開衣襟喂奶,導致電影《狂》被封12年

她時尚丫
2026-04-12 23:05:31
陳思誠給天下男人上了一課:48歲可以花心可以貪心,但千萬要收心

陳思誠給天下男人上了一課:48歲可以花心可以貪心,但千萬要收心

小椰的奶奶
2026-03-22 16:38:49
4500萬人恐斷糧?美深夜求援中俄:糧食紅線被踩,化肥緊缺超黃金

4500萬人恐斷糧?美深夜求援中俄:糧食紅線被踩,化肥緊缺超黃金

聞識
2026-04-20 03:18:26
2026-04-21 05:12:49
DeepTech深科技 incentive-icons
DeepTech深科技
麻省理工科技評論獨家合作
16602文章數 514892關注度
往期回顧 全部

科技要聞

HUAWEI Pura X Max發布 售價10999元起

頭條要聞

19歲女孩挪用自家1700萬當"榜一大姐" 親爹帶女兒自首

頭條要聞

19歲女孩挪用自家1700萬當"榜一大姐" 親爹帶女兒自首

體育要聞

阿森納已拼盡全力,但你早干嘛去了...

娛樂要聞

《八千里路云和月》田家泰暗殺

財經要聞

利潤暴跌7成,字節到底在做什么

汽車要聞

把天門山搬進廠?開仰望U8沖上45度坡的那刻 我腿軟了

態度原創

時尚
家居
藝術
教育
公開課

春天衣服不用準備太多!這幾大單品提前備好,百搭實用又不過時

家居要聞

自然慢調 慢享時光

藝術要聞

沙特官宣:全球最大單體建筑,延期十年!網友:又是畫餅?

教育要聞

問答環節:接受不完美,是最好的自愈

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關懷版