自然語言生成 3D 世界，智元仿真平臺 Genie Sim 3.0 迎來新升級

2026/4/8 15:19:21 來源：IT之家作者：遠洋責編：遠洋

評論：

感謝IT之家網(wǎng)友不一樣的體驗的線索投遞！

IT之家 4 月 8 日消息，今天，智元 Genie Sim3.0 一站式仿真開發(fā)平臺迎來新升級。官方稱，通過環(huán)境生成、場景泛化、數(shù)據(jù)采集到模型評測的全流程仿真，顯著加速模型訓(xùn)練驗證，提升開發(fā)者與研究者的研發(fā)效率，推動具身智能的創(chuàng)新應(yīng)用。

IT之家附官方詳細介紹如下：

01、Genie Sim World：語言造世界，環(huán)境構(gòu)建觸手可及
在傳統(tǒng)范式中，仿真環(huán)境是被“搭建”的。而在 Genie Sim 3.0 中，環(huán)境第一次成為被“生成”的對象。自然語言，即世界的接口。只需一句話或一張圖，即可生成可交互、可漫游、可訓(xùn)練的三維世界，實現(xiàn)“輸入即場景”的即時生成體驗。
圖文生境：無需建模、采集或硬件，僅文本或圖片輸入，用戶即可零門檻生成海量場景。通過多模態(tài)大模型，用戶指令一改、場景即換，無限泛化。
極速生成：空間世界模型單次推理即可完成構(gòu)建，生成速度從“小時級”提升至“分鐘級”，實時仿真、動態(tài)交互即開即用。
虛實一致：RGB、深度、激光雷達等多模態(tài)數(shù)據(jù)原生同步輸出，實現(xiàn)仿真數(shù)據(jù)與真實世界的渾然一體。
02、Genie Sim Benchmark：多維度、全方位覆蓋機器人算法核心能力的仿真評測基準
針對機器人算法核心的五大能力 —— 語言指令理解、空間關(guān)系認知、原子技能操作、環(huán)境擾動適應(yīng)、零樣本跨域遷移，Genie Sim Benchmark 分別設(shè)計了五大任務(wù)套件，支持 Genie Operator 系列、π 系列、GR00T 系列等主流基座模型，多維度系統(tǒng)性評估模型在復(fù)雜場景下的綜合表現(xiàn)。
Instruction 指令跟隨：檢驗?zāi)Ｐ蛯π螤?、大小、顏色、邏輯等自然語言指令的理解能力，檢驗語言與行為的對齊深度。
Spatial 空間理解：通過相對位置抓取、排序、疊放等任務(wù)，評估智能體在幾何與語義交織中的空間智能。
Manipulation 操作執(zhí)行：衡量多場景下的多樣化原子操作技能效果，并通過分層難度設(shè)計，檢驗長程任務(wù)中組合運用技能的執(zhí)行水平。
Robust 擾動適應(yīng)：通過光照變化、背景替換、指令泛化、相機噪聲、末端切換等十余類實際作業(yè)工況中可能出現(xiàn)的擾動，系統(tǒng)評估模型在物理世界中的適應(yīng)邊界與魯棒性。
Sim2Real 訓(xùn)以致用：包含一系列零樣本真機遷移的評測任務(wù)，通過純仿真數(shù)據(jù)訓(xùn)練的模型同樣可以部署在真機上達到較高的任務(wù)成功率，驗證模型的跨域遷移能力。
Genie Sim Benchmark 提供 π 系列和 GR00T 系列等開源基座模型在各個 benchmark 任務(wù)套件下的一鍵訓(xùn)練和評測功能，支持多種末端控制方式，快速繪制模型全景能力畫像。
Genie Sim Benchmark 模型評分
使用 Genie Sim Benchmark 仿真數(shù)據(jù)訓(xùn)練的模型可以實現(xiàn)零樣本遷移到真實世界，并且相同模型在仿真環(huán)境與真實世界的評測差異 < 10%，模型驗證無需真機部署，顯著提升算法迭代效率。
Genie Sim-Sim2Real 實驗對比
03、Genie Sim x RLinf：全面支持 RLinf 框架，開啟具身智能“強化”新時代
Genie Sim x RLinf 開源方案，提供一套“部署簡單、迭代高效”的強化學(xué)習(xí)工具鏈。完美補齊 VLA 模型短板，用低成本的 RL 后訓(xùn)練，打通從 " 泛化理解 " 到 " 精準微操 " 的最后一公里。
雙引擎聯(lián)合 + 并行仿真：物理與渲染引擎解耦，實現(xiàn) 1,000Hz 高精度物理模擬與高保真實時視覺觀測；通過大規(guī)模并行計算，顯著提升吞吐量，加速模型收斂。
開源任務(wù) + 評測閉環(huán)：強化學(xué)習(xí)方案支持對 Genie Sim 開源任務(wù)在線微調(diào)，通過交互式學(xué)習(xí)解決模型瓶頸；同時依托 Genie Sim 評測框架，在評估表現(xiàn)的同時提供可靠獎勵，驅(qū)動模型迭代。
通用標準 Gym 接口：極簡鏈路，生態(tài)無憂。提供標準 API，無縫適配 RLinf 及社區(qū)其他算法環(huán)境，降低使用門檻，便于二次開發(fā)。
Genie Sim x RLinf 為強化學(xué)習(xí)打通了從高效訓(xùn)練到閉環(huán)評測的路徑：并行仿真大幅提升采樣效率，標準接口降低開發(fā)門檻，讓模型在仿真中加速迭代。
Genie Sim x RLinf 并行訓(xùn)練
從海量仿真數(shù)據(jù)的開源共享，到大語言模型驅(qū)動的場景泛化，再到多維度評測體系的系統(tǒng)構(gòu)建 ——Genie Sim3.0 將“場景 — 數(shù)據(jù) — 評測”融為一體，大規(guī)模仿真資產(chǎn)同步可在覓蜂商城獲取，讓開發(fā)者不再受困于環(huán)境搭建與數(shù)據(jù)采集的繁瑣投入。
具身智能的進化，需要一座連接虛擬與現(xiàn)實的高效橋梁，它發(fā)生在無數(shù)次快速構(gòu)建的場景里，發(fā)生在源源不斷生成的數(shù)據(jù)中，也發(fā)生在每一次精準、自動化的評測迭代里。智元 Genie Sim 3.0 所做的，是為機器人從仿真走向真實提供高效引擎。我們希望這不僅是一個仿真平臺，更是一個加速器，一個讓機器人從“緩慢研發(fā)”，走向“快速落地”的加速器。
我們相信，這套開源平臺的開放與共享，將加速模型能力高效進化、邁向真實世界，成為通用機器人生態(tài)演進的重要一步。