无主之地2配置高吗|看真人裸体BBBBB|秋草莓丝瓜黄瓜榴莲色多多|真人強奷112分钟|精品一卡2卡3卡四卡新区|日本成人深夜苍井空|八十年代动画片

網易首頁 > 網易號 > 正文 申請入駐

Motoniq.ai等機構聯合揭示下一代機器人智能的四個缺失拼圖

0
分享至


這項由Motoniq.ai聯合斯坦福大學、ETH蘇黎世聯邦理工學院、意大利技術研究所、達姆施塔特工業大學以及UCL人工智能中心的研究人員共同撰寫的立場論文,于2026年6月發表在arXiv預印本平臺,論文編號為arXiv:2606.06556。有興趣深入閱讀的讀者可以通過這個編號找到原文。

這篇論文不是在匯報某一項具體實驗的結果,而是在做一件更重要的事:告訴整個機器人研究領域,我們可能走錯了方向,或者說,我們只走對了一半。

**機器人研究正在進入一個"大模型時代",但這個時代的地基還沒打好**

近幾年,人工智能領域有一個非常流行的思路:只要收集足夠多的數據、訓練足夠大的模型,機器就能學會做任何事。這個思路在語言領域大獲成功——ChatGPT就是最典型的例子。于是,機器人研究者們也想把同樣的路子復制過來:收集大量機器人操作示范、訓練巨型"視覺-語言-動作"模型(簡稱VLA,可以理解為一種能"看圖說話并做動作"的機器人大腦),期待機器人自然而然地學會各種技能。

然而,這篇論文的核心觀點是:這條路是必要的,但遠遠不夠。機器人面臨的根本瓶頸,不是模型不夠大,也不是數據不夠多,而是**現有的數據絕大多數無法被機器人直接使用**。

為了解釋這個問題,可以用一個建筑工地的比喻貫穿全文。VLA模型就像是一位熟練的建筑工人,他技術精湛,但他只能使用已經預先加工好的標準建材——切割整齊的木板、規格統一的磚塊、已經預拌好的水泥。然而,世界上絕大多數的原材料都不是這種形態:有的是樹干、有的是泥土、有的是石塊。如果我們想真正大規模地建造,就必須有一套把原材料加工成標準建材的系統。這套系統,正是當前機器人領域最缺失的東西。

**一、世界上到處都是"原材料",但機器人用不上**

地球上每天發生著數以億計的人類活動:人們在廚房切菜、在工廠裝配零件、在家里整理房間、在網上分享各種操作視頻。這些活動包含了海量關于"如何與物體交互"的信息——哪只手該抓哪里、用多大力氣、什么時候松手、失敗了怎么恢復。從信息量的角度看,這簡直是取之不盡的寶藏。

但機器人訓練需要的數據長什么樣?它需要精確的動作標簽——每一幀畫面對應機器人關節應該轉多少度、手臂應該往哪個方向移動多少毫米。它需要任務標簽——這段操作是在干什么、完成了沒有、哪里出錯了。它還需要獎勵信號——哪些動作是好的、哪些是壞的。

人類日常生活的視頻里,這些東西統統沒有。一段人手切菜的視頻,對機器人來說就像是一張地圖,但沒有比例尺、沒有坐標系、沒有路線標注——你知道目的地大概在哪個方向,但根本無法導航。這就是論文所說的"接地氣問題"(Grounding Problem):如何把廣泛存在于世界上的物理經驗,轉化成機器人能夠理解和使用的訓練信號。

目前,研究者們已經在多個方向上做出了努力,論文對這些努力進行了詳盡的梳理和評價。

**二、已有的努力:機器人原生數據的崛起與局限**

過去幾年,機器人領域積累了越來越多的"原生數據"——也就是直接由機器人執行并記錄的操作軌跡。這些數據就像建筑工地上已經加工好的標準建材,可以直接拿來用。

在數據集層面,各個研究機構貢獻了規模可觀的成果。BridgeData V2提供了約六萬條在二十四種不同環境中收集的機械臂操作軌跡;DROID則收集了約七萬六千條示范軌跡,相當于三百五十小時的操作錄像,由分布在全球各地的數據收集者完成;RH20T更進一步,收集了超過十一萬條接觸豐富的操作序列,同時包含視覺、力覺、聲音和動作信息。這些數據集的出現,證明了機器人學習在數據量擴大后確實會變得更好,多樣性不是錦上添花,而是泛化能力的核心要求。

在模型層面,RT-1使用約十三萬條真實機器人操作數據訓練出了一個能夠響應語言指令、執行七百多種任務的通用控制器;RT-2更進一步,把互聯網上海量的圖文數據和機器人軌跡數據混合訓練,讓模型能把網絡上的語義知識遷移到機器人控制中;OpenVLA則在約九十七萬條操作示范上訓練了一個七十億參數的開源視覺-語言-動作模型;Physical Intelligence的π0采用了一種叫"流匹配"的架構,在繼承大型視覺-語言預訓練模型知識的同時輸出連續的機器人動作。還有專門針對人形機器人的系統,比如英偉達的GR00T N1、谷歌的Gemini Robotics以及Figure公司的Helix,它們都試圖把VLA范式從桌面操作擴展到全身控制。

然而,這一切努力的共同局限在于:**它們的成功,正是因為數據已經是"標準建材"的形態**。每一條機器人軌跡,都需要有人或系統事先把它表達成機器人可以理解的動作、觀察、任務描述和成功標簽。這是VLA強大的原因,也是它無法簡單擴展的原因——世界上絕大多數的物理行為數據,并不是這種形態到達我們手中的。

**三、弱標注數據的價值與困境:視頻里的寶藏,夠不著**

既然機器人原生數據來之不易,研究者們自然想到:能不能從人類行為視頻中提取有用的東西?畢竟,互聯網上有數不清的人類操作視頻,從YouTube的烹飪教程到工廠操作記錄,信息量遠超任何機器人數據集。

這個方向確實有進展。R3M在Ego4D這個巨型人類第一視角視頻數據集上訓練視覺表征,讓機器人的"眼睛"能更好地理解人類世界中的物體和動作;VIP用時間上的遠近作為任務進度的代理信號,從人類視頻中提取能支持機器人強化學習的特征;MVP和VC-1則專注于大規模視覺預訓練對機器人操作的幫助。更進一步的是LAPA(潛在動作預訓練),它試圖從視頻幀的變化中學習一種"潛在動作"的表征——也就是說,不直接要求視頻提供機器人能執行的動作指令,而是先提取出"物體是怎么變化的"這種中間表示,再用少量機器人數據把這種中間表示翻譯成具體動作。UniVLA走了類似的路線,試圖從任意視角、任意身體形態的數據中提取以任務為中心的潛在動作。

在獎勵信號這個維度,也有一批工作嘗試從視頻中推斷"任務做得怎么樣了"。PROGRESSOR從無標注視頻中學習一種通用的獎勵函數;Adapt2Reward把視頻-語言模型遷移成語言條件下的獎勵函數;ReWiND利用視頻倒放和不對齊的視頻-語言對作為負樣本來訓練獎勵模型;TimeRewarder通過幀對之間的時間距離來推導進度信號;SARM則用細粒度的子任務標簽來監督獎勵模型,以便判斷復雜任務的進展。

然而,這些方法都面臨同一個本質困難:**弱標注數據并沒有消除接地氣問題,只是把它移動到了別處**。從視頻學到的"潛在動作"不是機器人能執行的指令,它只是一種物理變化的描述代碼,必須經過一個"翻譯"步驟才能變成真正的機器人動作。從視頻提取的進度信號,也不一定就是對新機器人身體有效的獎勵。人類的操作策略,更不一定能被有著完全不同身體結構的機器人復現。視頻擴展了物理經驗的來源,但同時也使接地氣問題變得更加無法回避。

**四、生成物理經驗的嘗試:仿真、世界模型,以及它們的硬傷**

除了從已有的觀察中提取信號,還有另一條路:直接生成更多的物理經驗。如果真實的機器人操作太貴、太慢、太危險,那能不能在計算機里模擬出足夠真實的環境,讓機器人在里面無限練習?

在仿真環境方面,RLBench提供了一百種精心設計的操作任務,可以用運動規劃自動生成無限量的示范;Meta-World標準化了多任務和元強化學習的評測;ManiSkill專注于從三維視覺輸入進行通用操作;CALVIN把挑戰推進到需要根據語言指令組合多個行為的長時序操作;LIBERO則研究機器人的終身學習,也就是如何在學會新任務的同時不忘記舊任務。這些仿真環境的價值在于讓研究可以大規模、可復現、可比較,但它們有一個前提假設:環境設計者已經把狀態空間、動作空間、任務定義、物體資產和成功條件全部規定好了。

更雄心勃勃的是MimicGen——它能從不到兩百個人類示范出發,通過把示范片段適配到新的物體位置和環境中,自動生成超過五萬條操作示范,覆蓋十八種任務。RoboCasa把這個思路擴展到日常家務場景,構建了一個大規模的模擬廚房環境;RoboCasa365更進一步,包含三百六十五種日常家務任務、兩千五百個廚房場景和超過兩千小時的機器人交互數據。RoboGen則用基礎模型和生成模型自動構建任務、場景和訓練數據,試圖讓機器人技能的獲取完全自動化。

真實到仿真再回到真實(Real-to-Sim-to-Real)是另一種思路:先從少量真實數據重建仿真環境,再在仿真中大量訓練,然后把策略部署回真實世界。RialTo用少量真實數據構建數字孿生,在仿真中用強化學習增強模仿學習策略;RL-GSBridge使用三維高斯潑濺(一種能生成高保真三維場景的技術)技術重建真實場景;Real-is-Sim則在數據收集、訓練、評估和部署的全過程中都使用動態數字孿生。還有專門針對導航任務的SOUS VIDE和SINGER,以及利用三維高斯潑濺可微分渲染特性進行端到端強化學習訓練的GRaD-Nav和GRaD-Nav++。

世界模型(World Model)是這個方向中最令人期待的概念。世界模型不是一個被動的視頻生成器,而是一個能夠預測"如果我做了這個動作,世界會變成什么樣"的預測系統——就像在大腦里裝了一個沙盤,可以在里面模擬各種可能性。這個想法可以追溯到Schmidhuber在1990年代的早期工作,后來被Ha和Schmidhuber在深度學習時代重新推廣,PlaNet和Dreamer系列工作讓它變得實用,DreamerV3更證明單一的世界模型算法可以用固定的超參數解決各種控制任務,DayDreamer則直接在物理機器人上學習世界模型。

在機器人領域,RoboDreamer學習用于機器人想象的組合式視頻世界模型;UniSim嘗試從多樣化數據集學習一個通用的交互式模擬器;DeepMind的Genie從無標注的互聯網視頻中學習生成式交互環境,甚至不需要真實的動作標簽就能實現逐幀控制;V-JEPA 2把互聯網視頻和少量機器人交互數據結合,展示了預測、規劃和零樣本機器人控制能力。

但關鍵問題來了:**一個對機器人有用的世界模型,需要的不只是視覺上的真實感,而是物理上的準確性**。它必須能預測物體會不會滑落、接觸會不會建立、關節會不會卡住、材料會不會變形。為此,研究者們發展了一系列更扎實的方法:FOCUS用以物體為中心的世界模型來表征操作中的物體和它們的交互;ParticleFormer學習基于三維點云的世界模型,直接從真實機器人感知數據預測多物體、多材料的動態;PointWorld把狀態和動作統一在三維空間域中,從RGB-D觀察和機器人動作預測完整場景的三維點流;ContactGaussian-WM結合高斯視覺表示和可微分接觸動力學,學習接觸豐富的物理操作世界模型。

在更基礎的層面,深度拉格朗日網絡、哈密頓神經網絡、拉格朗日神經網絡、交互網絡、圖網絡物理模擬器等一系列工作,試圖把物理定律直接編碼進神經網絡的結構中——讓模型不只是從數據中學習物理,而是從一開始就"懂得"守恒定律、幾何約束和對象關系。

還有一個常被忽視但至關重要的問題:**世界模型什么時候會出錯,它自己知道嗎?** 一個機器人如果用了一個不知道自己局限在哪里的世界模型來做規劃,就可能陷入一個惡性循環:世界模型的幻覺導致錯誤的動作,錯誤的動作把系統帶到世界模型更不熟悉的地方,進而產生更嚴重的幻覺。Mei等人的工作學習了一種帶有統計標定的潛在不確定性量化方法,可以把不確定性可視化到像素層面;Li等人的工作進一步證明了不確定性量化對于用世界模型訓練強化學習策略的重要性;Ward等人則展示了一個帶有標定潛在空間不確定性的世界模型可以用來檢測VLA操作策略在運行時的錯誤。

所有這些努力揭示的共同點是:**生成的經驗只有在保留了對控制至關重要的物理變量時才是有用的**。一個視覺上真實但忽略接觸、力、摩擦或穩定性的預測,對機器人控制來說不是可靠的訓練信號。這讓接地氣問題再次回到視野中心:想象中的未來只有在物理上是有根基的、可操作的時候,才對機器人學習有意義。

**五、四個缺失的拼圖:從物理經驗到物理智能**

經過以上梳理,論文給出了它最核心的觀點:下一代機器人系統需要的不只是更大的策略模型,而是四個此前缺失的關鍵組件。用建筑工地的比喻來說,我們不只需要更多更好的建筑工人(VLA模型),我們更需要完整的原材料加工體系。

**第一塊拼圖:物理數據引擎與具身自動標注**

這是整個體系的起點。物理數據引擎要做的事,是把各種各樣的原始物理經驗——機器人操作軌跡、人類行為視頻、穿戴式傳感器數據、觸覺流、工廠操作記錄、仿真數據、部署失敗記錄——轉化成機器人學習實際需要的結構化信號:物體狀態、接觸事件、任務階段、潛在動作、目標和成功/失敗標簽。

論文用數學語言精確描述了這個問題的復雜性。原始經驗是異步的、多模態的:一個穿著感知服裝進行示范的人,可能同時產生視頻幀、身體姿態測量、手部軌跡、觸覺信號尖峰和語言指令,但這些信號的采樣頻率不同,時間戳不一致。系統需要先把這些異步流對齊到一個共同的物理時間線上,識別出潛在的物理事件序列(比如"接近杯子"→"接觸開始"→"抓握"→"提起"→"放置"),再對每個事件推斷物體狀態、接觸標簽、任務階段、潛在動作代碼和進度/獎勵信號。

這個過程論文稱為"具身自動標注":不是普通的語義視頻理解(給視頻加字幕說"一個人把杯子放到托盤上"),而是恢復出一系列物理事件的精確描述,包括杯子的姿態、手與杯子的接觸、當前任務階段、正在執行的潛在變換,以及任務進度是否在增加。這些物理上有根基的標簽,才能被用于訓練感知模型、獎勵模型、重定向系統、世界模型或機器人策略。

穿戴式傳感提供了特別有價值的信號。一套動作捕捉或感知服,能提供普通視頻缺乏的結構化信號:身體姿態、手部軌跡、時序信息、接觸事件、觸覺線索和物體交互痕跡。這意味著人類示范不再只是一段視頻,而是一個包含任務階段邊界、手-物接觸、物體狀態變化、意圖、糾正和候選技能片段等豐富標簽的信息來源。

更有意思的是,人類行為數據還有另一層價值:它不只是在教機器人怎么完成任務,還在教機器人如何理解人類——人是怎么移動的、怎么使用身體和環境、怎么相互交互。未來的機器人智能應該包含一個關于人類行為的協作模型,這類人類數據應該被用于訓練能夠感知人類、配合人類、與人類協作的策略。

**第二塊拼圖:跨身體的任務保留重定向**

從物理經驗中推斷出結構化的事件序列,并不等于擁有了機器人策略。一段人類示范、一個網絡視頻或者一段穿戴傳感器的軌跡,可能揭示了"物理上發生了什么"——哪個物體移動了、哪里發生了接觸、執行了哪個任務階段、進度怎樣——但它仍然沒有告訴這個特定的機器人應該怎么行動。

這就是所謂的身體鴻溝。人類的手、平行夾爪、靈巧手、移動機械臂、四足機器人和人形機器人,擁有完全不同的運動學、動力學、傳感器、動作空間、接觸表面和失效模式。核心問題不是如何復制人類的動作,而是如何在一個不同的身體執行時,保留那個動作對世界產生的任務相關物理效果。論文把這稱為"任務保留重定向"。

重定向可以保留不同層次的不變量。最弱的層次是姿態保留:把人手或手臂的運動映射到機器人末端執行器的軌跡。強一些的是接觸保留:確保機器人在恰當的時刻觸碰到物體的正確表面。更強的是物體狀態轉換保留:確保抽屜打開了、杯子被提起來了、銷釘對齊了。最強的形式是意圖或技能的保留:機器人可能使用完全不同的運動方式,但在同樣的約束條件下完成了同樣的任務。通用機器人學需要重定向從姿態保留的模仿,升級到任務效果保留的翻譯。

正確的重定向目標不是人類的關節軌跡,而是任務相關的物理變換本身:對于打開抽屜來說,是抽屜的位移;對于放置物體來說,是物體的姿態;對于插入操作來說,是相對對齊程度;對于抓握來說,是接觸狀態。這就是為什么穿戴式傳感和具身自動標注如此有價值:它們提供的正是任務保留重定向所需的中間變量——手-物接觸、力相關事件、物體狀態變化、任務階段邊界和潛在物理動作。這些變量比原始的人類關節角度更具可遷移性,比視頻字幕更具信息量。

**第三塊拼圖:超越視覺真實感的物理接地世界模型**

推斷物理事件序列并將其重定向,仍然留下了一個核心問題:機器人必須能夠對后果進行推理。一個候選動作只有在機器人能夠預判它對世界會產生什么影響時,才是有用的。物體會移動還是滑落?接觸會建立還是失去?抽屜會打開還是卡住?杯子放手后會保持穩定嗎?布料會朝預期方向變形嗎?這些不只是視覺問題,它們需要對幾何、接觸、力、約束、材料屬性和任務進度進行推理。

一個對機器人真正有用的世界模型,承擔的角色與通用視頻生成器截然不同。視頻模型可以生成看起來真實的未來幀,但機器人需要的是可操作的預測:這個動作是否產生了預期的物體狀態轉換?抓握是否穩定?會不會發生碰撞?插入會不會因為偏移而失敗?物體松手后會不會倒?因此,機器人世界模型應該盡可能在結構化的物理變量上工作:物體姿態、空間關系、接觸、約束、速度、力、可變形狀態,以及摩擦、質量、剛度或順應性等物理屬性。

最重要的一點是,后果預測應該是任務條件的。世界模型不需要對未來的每一個細節都預測得同樣好。它需要預測的是與任務相關的那部分未來。打開抽屜時,抽屜的位移和把手接觸比背景紋理更重要;倒水時,液體狀態和容器姿態比桌面外觀更重要;折疊布料時,可變形幾何和接觸點比像素級的視頻重建更重要。機器人世界模型的目標應該與下游控制對齊,而不只是視覺重建。問題不是"未來看起來真實嗎",而是"預測是否保留了決定成功或失敗的物理后果"。

在這個框架中,世界模型在整個系統中扮演著中心角色。它可以在動作執行前用來評估候選的重定向動作,在規劃過程中搜索更好的替代方案,在失敗后解釋哪里出了問題,以及在訓練過程中生成反事實經驗。例如,如果一段人類示范暗示了潛在動作"向外拉抽屜",重定向模型可能提出幾種機器人運動方案,物理接地世界模型就可以評估哪種運動最可能建立正確的接觸、沿正確方向施力、避免碰撞,并產生預期的抽屜位移。

**第四塊拼圖:自我改進的部署循環**

機器人執行動作之后,核心問題不再只是"發生了什么",而是"發生的事情有用嗎"。世界模型可能預測到杯子會移動、抽屜會打開;重定向系統可能提出了一個物理上可行的動作;策略也在真實世界中執行了那個動作。但從結果中學習,需要對結果進行任務條件的解讀:動作讓任務有進展了嗎?它解決了預期的任務嗎?失敗是因為感知、接觸、力、時序、規劃還是身體不匹配?最終狀態相對于目標來說是好還是壞?

這就是為什么機器人獎勵模型應該是任務條件的。同一個物理狀態,在不同的目標下意味著完全不同的事情:杯子放在桌上,對于"把杯子放下來"是成功,對于"拿起杯子"是失敗,對于"打開抽屜"則無關緊要。獎勵不只是附加在狀態上的一個數字,它是在一個目標下對物理進度的解讀。一個好的獎勵模型應該能夠估計相關接觸是否發生、物體是否按預期方式移動、系統是否進入了可恢復或不可恢復的失敗模式,以及最終配置是否滿足了任務要求。

這個獎勵接地氣的問題,正是讓自我改進的部署成為可能的關鍵。在一個已部署的機器人系統中,每一次執行結果都應該不只是一個通過/失敗記錄,而應該成為一個帶標簽的物理事件。成功的執行提供了魯棒任務完成的樣本;失敗的執行提供了關于缺少接觸、錯誤物體狀態、不穩定抓握、對齊不佳、不安全運動或獎勵誤判的信息;人類糾正則提供了高價值的監督信號——它不只告訴機器人它錯了,還經常揭示任務本應如何進行。如果這些結果被反饋回物理數據引擎,系統就可以更新它的獎勵模型、重定向模型、世界模型和策略。

由此形成的循環是:部署策略→觀察結果→推斷任務條件下的進度/成功/失敗→解釋失敗或糾正→把接地氣監督添加到數據引擎→更新獎勵模型、世界模型、重定向和策略→重新部署。這是一個僅僅執行訓練好的策略的機器人,與一個隨時間積累能力的機器人學習系統之間的本質區別。

沒有獎勵接地氣,部署軌跡很難被利用:失敗只是一段失敗的視頻,成功只是一個碰巧奏效的事件。有了任務條件的獎勵接地氣,部署軌跡就變成了結構化監督。系統可以問:哪個子目標失敗了、缺少哪個接觸、哪個物體狀態錯了、什么樣的替代動作可以改善結果?

**六、整幅拼圖:從孤立的政策到積累的物理智能**

把四塊拼圖放在一起,就能看清論文描述的完整圖景。物理數據引擎把異質經驗轉化為潛在物理事件;任務保留重定向把那些事件映射到機器人動作;物理接地世界模型預測那些動作的后果;任務條件獎勵接地氣解讀結果。部署則持續提供新的事件,重新進入同一條流水線。長期目標是一個積累型的物理智能系統:每一次人類示范、每一段網絡視頻、每一次仿真推演、每一次機器人失敗、每一次人類糾正,都成為下一代機器人行為的結構化監督。

論文明確指出,VLA模型在這個圖景中仍然重要,但它只是整個物理智能棧中的一層——一個依賴上游接地氣機制的策略接口,這些上游機制處理數據、身體、動力學、獎勵和部署反饋。

這個圖景也意味著我們需要一套全新的評價標準。評估通用機器人的問題,不應該只是"更大的策略能解決更多任務嗎",而應該是:系統能從人類行為中推斷接觸、物體狀態變化和任務階段嗎?它能在不只復制姿態的情況下,把示范的物理效果重定向到新的身體嗎?它的世界模型能預測對成功和失敗重要的后果嗎?而不只是生成看起來真實的未來幀?它的獎勵模型能區分當前目標下的進度、失敗、恢復和成功嗎?部署失敗能更新棧中正確的組件嗎——策略、獎勵模型、世界模型,還是重定向機制?這些問題,定義了超越VLA擴展的機器人接地氣議程。

歸根結底,這篇論文傳達的信息是:機器人領域的下一個基礎模型,可能不會是一個單一的巨型模型,而是一個系統:一個把異質經驗轉化為結構化監督的物理數據引擎、一個把任務相關效果映射到機器人動作的身體接口、一個生成可操作反事實的物理接地世界模型,以及一個把成功、失敗和糾正轉化為未來改進的任務條件部署循環。在這樣的系統中,每一次人類示范、每一段網絡視頻、每一次仿真推演、每一條觸覺軌跡、每一次機器人失敗和每一次人類糾正,都成為物理智能的一部分不斷積累的監督引擎。

機器人,因此需要的遠不止VLA。它們需要能讓物理經驗變得可用的架構支柱。機器人領域的進步,不只取決于擴展策略,還取決于構建將世界上的行為數據連接到機器人動作、獎勵、模型和持續部署的接地氣機制。這個領域面臨的核心挑戰,是從依賴機器人原生數據集,走向世界規模的物理監督,從孤立的策略,走向能從物理世界本身學習的系統。

對這一研究方向感興趣的讀者,可以通過arXiv編號2606.06556獲取完整論文,深入了解每個部分的技術細節和數學形式化表述。

Q&A

Q1:VLA模型(視覺-語言-動作模型)到底是什么,為什么它不夠用?

A:VLA模型是一種能"看圖說話并做動作"的機器人大腦,它接收攝像頭畫面和語言指令,輸出機器人的具體動作。它不夠用,是因為它只能處理已經被整理成標準格式的數據——有明確動作標簽的機器人操作軌跡。而世界上絕大多數的人類行為視頻、工廠操作記錄等,都缺乏這些標簽,VLA根本無法直接從中學習。

Q2:物理接地世界模型與普通視頻生成模型有什么區別?

A:普通視頻生成模型追求畫面真實感,能生成"看起來像真的"未來畫面。物理接地世界模型則要求預測對機器人控制有實際意義的物理變量——比如抓握是否穩定、接觸會不會建立、物體松手后會不會倒。一個畫面真實但忽視了摩擦力和接觸關系的預測,對機器人規劃來說毫無價值,這就是兩者的本質區別。

Q3:四個缺失組件中的"任務保留重定向"要解決什么問題?

A:它要解決"身體鴻溝"問題。人類手臂的動作無法直接被機械手復制,因為兩者的關節結構、力量范圍和接觸方式完全不同。任務保留重定向的目標不是復制人類的關節軌跡,而是找到機器人自己的運動方式,使其對世界產生的物理效果——比如抽屜打開的距離、物體被提起的姿態——與人類示范的效果盡可能一致。

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
賣掉油車!我換“純電車”已經4年了,現在終于相信朋友當初建議

賣掉油車!我換“純電車”已經4年了,現在終于相信朋友當初建議

華庭講美食
2026-06-14 11:45:02
“摸奶子”再惹爭議,OPPO的流量反噬開始了

“摸奶子”再惹爭議,OPPO的流量反噬開始了

品牌頭版
2026-05-13 10:18:15
太沉重了!一張殯儀館的電子顯示屏8位逝者,有6人未能活到55歲

太沉重了!一張殯儀館的電子顯示屏8位逝者,有6人未能活到55歲

火山詩話
2026-06-12 08:54:20
日本強奸犯進國家隊踢世界杯?日本主帥發表驚人言論:他那是失誤

日本強奸犯進國家隊踢世界杯?日本主帥發表驚人言論:他那是失誤

十點街球體育
2026-06-13 21:00:12
年輕人開始全款買房:潮汕獨生女635萬買下北京一套房,“不想背債了”

年輕人開始全款買房:潮汕獨生女635萬買下北京一套房,“不想背債了”

時代財經
2026-06-12 12:19:50
世界杯伊朗隊訓練場旁不到300米處發現一具腐尸:尸體藏在美國牌照車內,有明顯遭暴力痕跡;墨西哥警方介入調查,稱此事并非針對伊朗隊

世界杯伊朗隊訓練場旁不到300米處發現一具腐尸:尸體藏在美國牌照車內,有明顯遭暴力痕跡;墨西哥警方介入調查,稱此事并非針對伊朗隊

揚子晚報
2026-06-13 15:19:53
伊朗消息人士說美伊將舉行視頻會議并簽署協議

伊朗消息人士說美伊將舉行視頻會議并簽署協議

財聯社
2026-06-14 15:13:15
巴基斯坦的天塌了!美國和印度太狠了,中國:真的愛莫能助

巴基斯坦的天塌了!美國和印度太狠了,中國:真的愛莫能助

花顏蘊韻
2026-06-14 04:18:50
全球最割裂的股市規則!全世界都是自由T+0,唯獨大A散戶鎖死T+1

全球最割裂的股市規則!全世界都是自由T+0,唯獨大A散戶鎖死T+1

王二哥老搞笑
2026-06-09 20:28:44
心梗!40萬打出1億收入!還被拋棄了!

心梗!40萬打出1億收入!還被拋棄了!

柚子說球
2026-06-13 16:32:13
巴西女子蹦極沒系繩,被直接扔下摔死,現場慘烈,3個員工好淡定

巴西女子蹦極沒系繩,被直接扔下摔死,現場慘烈,3個員工好淡定

打小我就醜
2026-06-14 18:28:51
特斯拉和比亞迪電池差距有多大?老司機:一個真技術,一個只吹牛

特斯拉和比亞迪電池差距有多大?老司機:一個真技術,一個只吹牛

混沌錄
2026-06-12 22:43:35
某魚驚現“天價筆”:800元一支的中性筆,藏著多少骯臟暗語?

某魚驚現“天價筆”:800元一支的中性筆,藏著多少骯臟暗語?

番外行
2026-02-26 19:53:05
涉嫌嚴重違紀違法,已退休近9年的人保集團原副總裁俞小平被查

涉嫌嚴重違紀違法,已退休近9年的人保集團原副總裁俞小平被查

財聞
2026-06-14 18:21:19
湖北寶媽2分50秒私密視頻發到家長群,網友:看過讓人汗顏

湖北寶媽2分50秒私密視頻發到家長群,網友:看過讓人汗顏

王姐懶人家常菜
2026-06-14 13:53:16
傳國玉璽的下落,史書已經給過“暗示”,大概率就在這兩個地方!

傳國玉璽的下落,史書已經給過“暗示”,大概率就在這兩個地方!

掠影后有感
2026-06-14 10:05:50
女子考編第一被遞補,維權后崗位直接取消!黑龍江:審核人員失誤

女子考編第一被遞補,維權后崗位直接取消!黑龍江:審核人員失誤

聽心堂
2026-06-13 22:26:26
中東那個惡霸終于死了,不是被打死的,是被特朗普的談判拖死的!

中東那個惡霸終于死了,不是被打死的,是被特朗普的談判拖死的!

殘夢重生來
2026-06-14 04:59:12
千萬不要給女孩子遞紙巾!

千萬不要給女孩子遞紙巾!

果粉之家
2026-06-14 13:15:35
高鑫王一楠女兒高中畢業典禮!外公外婆昆明飛上海,全家盛裝出席

高鑫王一楠女兒高中畢業典禮!外公外婆昆明飛上海,全家盛裝出席

露珠聊影視
2026-06-13 22:29:29
2026-06-14 18:59:00
科技行者 incentive-icons
科技行者
科技正在如何變革商業世界
8771文章數 565關注度
往期回顧 全部

科技要聞

Anthropic最強模型被禁,傳亞馬遜通風報信

頭條要聞

村民砍掉"孤獨樹":砍樹前一天跟紅裙女子發生沖突

頭條要聞

村民砍掉"孤獨樹":砍樹前一天跟紅裙女子發生沖突

體育要聞

8年8隊奪冠,鄧肯那句話,現在還給了馬刺

娛樂要聞

鄧超攜子觀戰NBA,等等帥氣十足

財經要聞

金價跌至900元關口,大媽又來抄底了!

汽車要聞

綜合續航超1600km/零百加速4秒級 2027款星途ES預售18.99萬起

態度原創

教育
房產
親子
家居
公開課

教育要聞

2026高考作文:萬古融雪,終貫滄海

房產要聞

海南最賺錢行業曝光!最快4年半,海口全款買三房!

親子要聞

女兒想吃榴蓮說媽媽沒給她買,媳婦卻不是這么說的,看看誰撒謊了

家居要聞

空間微調 移形換境

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關懷版