網易首頁 > 網易號 > 正文 申請入駐

智元仿真平臺Genie Sim 3.0迎來新升級,自然語言生成3D世界 | 前沿在線

0
分享至



文:智元AGIBOT

編輯:前沿在線 編輯部

真實世界的數據,讓機器人開始真正“看見”和“經歷”這個世界。但當數據問題被部分解決之后,一個更深層的問題隨之浮現:僅僅依靠現實世界,是否足夠支撐具身智能的快速進化?場景構建難以泛化,評測標準缺乏統一,每一次算法迭代,仍伴隨著繁重的工程投入。


如果現實世界不夠快,我們就“生成一個世界”,這正是 Genie Sim 誕生的初衷,以構建一個與真實世界等價、甚至更高效的“訓練和驗證環境”。

今天,Genie Sim3.0 一站式仿真開發平臺迎來新升級。通過環境生成、場景泛化、數據采集到模型評測的全流程仿真,顯著加速模型訓練驗證,提升開發者與研究者的研發效率,推動具身智能的創新應用。

從構建到數據,從場景到評測——我們為具身智能提供一套完整可復用的開源底座。

  • 項目主頁:agibot-world.com/genie-sim

  • Github地址:github.com/AgibotTech/genie_sim


Genie Sim World:語言造世界,環境構建觸手可及

在傳統范式中,仿真環境是被“搭建”的。而在 Genie Sim 3.0 中,環境第一次成為被“生成”的對象。自然語言,即世界的接口。只需一句話或一張圖,即可生成可交互、可漫游、可訓練的三維世界,實現“輸入即場景”的即時生成體驗。

  • 圖文生境:無需建模、采集或硬件,僅文本或圖片輸入,用戶即可零門檻生成海量場景。通過多模態大模型,用戶指令一改、場景即換,無限泛化。

  • 極速生成:空間世界模型單次推理即可完成構建,生成速度從“小時級”提升至“分鐘級”,實時仿真、動態交互即開即用。

  • 虛實一致:RGB、深度、激光雷達等多模態數據原生同步輸出,實現仿真數據與真實世界的渾然一體。



Genie Sim Benchmark:多維度、全方位覆蓋機器人算法核心能力的仿真評測基準

針對機器人算法核心的五大能力——語言指令理解、空間關系認知、原子技能操作、環境擾動適應、零樣本跨域遷移,Genie Sim Benchmark分別設計了五大任務套件,支持Genie Operator系列、π系列、GR00T系列等主流基座模型,多維度系統性評估模型在復雜場景下的綜合表現。

  • Instruction 指令跟隨:檢驗模型對形狀、大小、顏色、邏輯等自然語言指令的理解能力,檢驗語言與行為的對齊深度。

  • Spatial 空間理解:通過相對位置抓取、排序、疊放等任務,評估智能體在幾何與語義交織中的空間智能。

  • Manipulation 操作執行:衡量多場景下的多樣化原子操作技能效果,并通過分層難度設計,檢驗長程任務中組合運用技能的執行水平。

  • Robust擾動適應:通過光照變化、背景替換、指令泛化、相機噪聲、末端切換等十余類實際作業工況中可能出現的擾動,系統評估模型在物理世界中的適應邊界與魯棒性。

  • Sim2Real 訓以致用:包含一系列零樣本真機遷移的評測任務,通過純仿真數據訓練的模型同樣可以部署在真機上達到較高的任務成功率,驗證模型的跨域遷移能力。






Genie Sim Benchmark提供π系列和GR00T系列等開源基座模型在各個benchmark任務套件下的一鍵訓練和評測功能,支持多種末端控制方式,快速繪制模型全景能力畫像。




Genie Sim Benchmark模型評分

使用Genie Sim Benchmark仿真數據訓練的模型可以實現零樣本遷移到真實世界,并且相同模型在仿真環境與真實世界的評測差異<10%,模型驗證無需真機部署,顯著提升算法迭代效率。


Genie Sim-Sim2Real實驗對比


Genie Sim x RLinf:全面支持RLinf框架,開啟具身智能“強化”新時代

Genie Sim x RLinf 開源方案,提供一套“部署簡單、迭代高效”的強化學習工具鏈。完美補齊 VLA 模型短板,用低成本的 RL 后訓練,打通從"泛化理解"到"精準微操"的最后一公里。

  • 雙引擎聯合+并行仿真:物理與渲染引擎解耦,實現1,000Hz高精度物理模擬與高保真實時視覺觀測;通過大規模并行計算,顯著提升吞吐量,加速模型收斂。

  • 開源任務 + 評測閉環:強化學習方案支持對Genie Sim開源任務在線微調,通過交互式學習解決模型瓶頸;同時依托Genie Sim評測框架,在評估表現的同時提供可靠獎勵,驅動模型迭代。

  • 通用標準Gym接口:極簡鏈路,生態無憂。提供標準API,無縫適配RLinf及社區其他算法環境,降低使用門檻,便于二次開發。

Genie Sim x RLinf 為強化學習打通了從高效訓練到閉環評測的路徑:并行仿真大幅提升采樣效率,標準接口降低開發門檻,讓模型在仿真中加速迭代。


Genie Sim x RLinf 并行訓練

從海量仿真數據的開源共享,到大語言模型驅動的場景泛化,再到多維度評測體系的系統構建——Genie Sim3.0 將“場景—數據—評測”融為一體,大規模仿真資產同步可在覓蜂商城獲取,讓開發者不再受困于環境搭建與數據采集的繁瑣投入。

具身智能的進化,需要一座連接虛擬與現實的高效橋梁,它發生在無數次快速構建的場景里,發生在源源不斷生成的數據中,也發生在每一次精準、自動化的評測迭代里。智元 Genie Sim 3.0 所做的,是為機器人從仿真走向真實提供高效引擎。我們希望這不僅是一個仿真平臺,更是一個加速器,一個讓機器人從 “緩慢研發”,走向 “快速落地” 的加速器。

我們相信,這套開源平臺的開放與共享,將加速模型能力高效進化、邁向真實世界,成為通用機器人生態演進的重要一步。


前沿動態前沿大會
前沿人物

「在看」,給前前加雞腿

特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相關推薦
熱點推薦
有人花錢勸你躺平!境外組織資助網紅批量灌毒,靠“擺爛”滲入

有人花錢勸你躺平!境外組織資助網紅批量灌毒,靠“擺爛”滲入

聽心堂
2026-04-28 09:49:25
網紅白冰偷稅被追繳1891萬,全網賬號已禁言,妻子江夢瑤曝其現狀

網紅白冰偷稅被追繳1891萬,全網賬號已禁言,妻子江夢瑤曝其現狀

阿纂看事
2026-04-28 18:04:57
許家印惡貫滿盈 若只是經濟問題國家不會動他 踩3條紅線 或判無期

許家印惡貫滿盈 若只是經濟問題國家不會動他 踩3條紅線 或判無期

念洲
2026-04-28 17:20:35
消息稱Meta為撤銷收購Manus做準備 騰訊等投資者計劃配合

消息稱Meta為撤銷收購Manus做準備 騰訊等投資者計劃配合

鳳凰網科技
2026-04-28 11:58:06
輪到銀行發愁了!越來越多的儲戶,要把存款分散到多家銀行?

輪到銀行發愁了!越來越多的儲戶,要把存款分散到多家銀行?

老特有話說
2026-04-28 16:00:15
“只顧自己紋眉,不管女兒死活?”14歲女孩生日照,臉上全是槽點

“只顧自己紋眉,不管女兒死活?”14歲女孩生日照,臉上全是槽點

蝴蝶花雨話教育
2026-04-25 00:45:03
季報利好!12家A股季報集體翻倍最高6136%,全是社保最新重倉前十

季報利好!12家A股季報集體翻倍最高6136%,全是社保最新重倉前十

長風價值掘金
2026-04-28 15:26:20
多名院士調查發現:吃一口放久發酵的腐乳,或等于進一次毒?真假

多名院士調查發現:吃一口放久發酵的腐乳,或等于進一次毒?真假

健康科普365
2026-04-27 16:15:12
集體跳水!特朗普突傳大消息!A股突變!

集體跳水!特朗普突傳大消息!A股突變!

龍行天下虎
2026-04-28 20:09:48
濟南文旅因夏雨荷引熱議:大明湖底的十萬亡魂,濟南人可還記得

濟南文旅因夏雨荷引熱議:大明湖底的十萬亡魂,濟南人可還記得

十為先生
2026-04-28 14:53:25
伊朗儲油能力即將達到極限 減產或永久性損害油田產能

伊朗儲油能力即將達到極限 減產或永久性損害油田產能

財聯社
2026-04-28 15:06:05
云南一方丈意外身亡,整理遺物銀行卡有498萬,方丈女兒提出繼承,寺廟拒絕:出家人,這筆錢屬于寺廟!

云南一方丈意外身亡,整理遺物銀行卡有498萬,方丈女兒提出繼承,寺廟拒絕:出家人,這筆錢屬于寺廟!

大愛三湘
2026-04-28 19:39:12
中共中央政治局會議明確“努力穩定房地產市場”,業內:城市更新已成為新的增長動力

中共中央政治局會議明確“努力穩定房地產市場”,業內:城市更新已成為新的增長動力

每日經濟新聞
2026-04-28 19:36:18
A股:2.5億股民,今晚可能要興奮得睡不著覺了,你知道為什么嗎?

A股:2.5億股民,今晚可能要興奮得睡不著覺了,你知道為什么嗎?

夜深愛雜談
2026-04-28 21:44:29
法塔赫勝選、哈馬斯出局,殘害平民失去人心,恐怖主義沒有未來

法塔赫勝選、哈馬斯出局,殘害平民失去人心,恐怖主義沒有未來

壹家言
2026-04-28 11:11:27
校園“奶頭樂”泛濫成災,無數青少年被荼毒,很多家長卻一無所知

校園“奶頭樂”泛濫成災,無數青少年被荼毒,很多家長卻一無所知

木言觀
2026-04-28 23:20:10
阿聯酋宣布退出歐佩克,背后原因有哪些?將產生哪些影響?

阿聯酋宣布退出歐佩克,背后原因有哪些?將產生哪些影響?

聞號說經濟
2026-04-28 21:27:29
大變天!中國最牛網約車巨頭要IPO

大變天!中國最牛網約車巨頭要IPO

投資家
2026-04-28 21:15:46
英超史上最“冤”的降級隊,鐵錘幫42分都救不回來?

英超史上最“冤”的降級隊,鐵錘幫42分都救不回來?

樂道足球C
2026-04-28 16:01:09
31省份去年常住人口數據公布:7省常住人口同比增長;濟南、長沙2025年常住人口增量超10萬人

31省份去年常住人口數據公布:7省常住人口同比增長;濟南、長沙2025年常住人口增量超10萬人

魯中晨報
2026-04-28 20:56:03
2026-04-29 01:24:49
前沿在線 incentive-icons
前沿在線
前沿在線官方賬號,關注AI、機器人、智能車等前沿領域;
182文章數 1235關注度
往期回顧 全部

科技要聞

10億周活目標落空!傳OpenAI爆發內部分歧

頭條要聞

媒體:臺海軍退役少校登烏魯木齊艦 給出的結論很直接

頭條要聞

媒體:臺海軍退役少校登烏魯木齊艦 給出的結論很直接

體育要聞

魔術黑八活塞,一步之遙?!

娛樂要聞

蔡卓妍官宣結婚,老公比她小10歲

財經要聞

中央政治局會議定調,八大看點速覽!

汽車要聞

拒絕瘋狂套娃!現代艾尼氪金星長在未來審美點上

態度原創

本地
游戲
旅游
親子
公開課

本地新聞

用青花瓷的方式,打開西溪濕地

這不爽翻了?曝PS6或能穩穩運行60幀+光追的游戲畫面

旅游要聞

喝村咖、品美食、享野趣、慢休閑!“小院經濟”激活鄉村新引力

親子要聞

有一點點近視,到底要不要戴眼鏡?

公開課

李玫瑾:為什么性格比能力更重要?

無障礙瀏覽 進入關懷版