智元在CES发布业内首个大语言模型驱动的开源仿真平台 Genie Sim 3.0

模仿游戏：模仿动物、交通工具等，提升语言模仿能力。 #生活技巧# #亲子教育建议# #幼儿启蒙游戏#

当仿真环境的真实性逼近物理世界，当场景构建的效率以“自然对话”和“分钟”来衡量，具身智能的研发范式将发生根本性改变。智元机器人在CES国际消费电子展首日正式发布首个大语言模型驱动的开源仿真平台——Genie Sim 3.0。基于NVIDIA Isaac Sim ，Genie Sim 3.0融合三维重建与视觉生成，打造数字孪生级的高保真环境；首创大语言模型驱动的场景泛化技术，让万级场景的生成只需几分钟；同步开源包含真实机器人作业场景的上万小时仿真数据集；并构建了覆盖10万+场景的多维度智能评估体系，为模型能力绘制全景画像。

从数字资产生成、场景泛化、数据采集到自动评测的全流程功能，这一整套完整闭环的解决方案，将显著加速模型训练验证，降低对物理硬件的依赖，助力开发者与研究者的研发效率，推动具身智能的创新应用。

项目开源地址

Github

github.com/AgibotTech/genie_sim

Modelscope

modelscope.cn/datasets/agibot_world/GenieSim3.0-Dataset

项目主页

agibot-world.com/genie-sim

Genie Sim 3.0 仿真平台架构

01/

五大核心亮点

开启具身仿真新纪元

数字孪生级高保真仿真环境

传统仿真难以兼顾视觉逼真与物理真实。Genie Sim 3.0开创性地将三维重建、视觉生成技术与物理引擎深度融合，实现了视觉真实感与物理精确性的统一。

精准重建：依托 MetaCam手持3D激光扫描仪，结合高分辨率RGB、360° LiDAR点云与厘米级RTK定位，实现对真实环境的毫米级精准复刻。

视觉增强：利用视觉生成模型，智能合成新视角图像增强3D重建，极大提升了仿真环境的视觉逼真度。

资产生成：对于任意物体，仅需一段60秒环拍视频，即可快速生成带精确网格的仿真模型，大幅提升场景构建效率。

首创自然语言驱动的场景生成与泛化

告别手动编写复杂逻辑的场景生成方式，在Genie Sim 3.0平台中，开发者输入自然语言指令即可驱动平台在分钟级内自动生成、泛化成千上万个训练与测试场景。

对话式创建：直接输入指令「生成一份蛋白质和维生素含量丰富的晚餐」，平台自动理解并构建出结构化的仿真场景。

智能编辑与泛化：生成场景自带结构化信息与视觉预览，可进一步通过对话进行场景增广、细节增删、布局调整，最终输出满足要求的仿真场景。

全量开源仿真数据集与高效采集方案

具身领域最大规模开源仿真数据集，涵盖200余项任务、总时长上万小时，为模型研发提供坚实的数据基石。

多维度数据：数据集包含RGB-D、双目视觉、全身关节状态等多传感器信息，并覆盖背景、布局、光照、噪声等多种泛化维度。

智能采集工具：平台提供低延迟遥操作与自动任务编排双模式采集，结合自动化标注实现高效数据生产。

独创错误恢复机制：任务失败后可自动回退至关键节点续采，将数据采集损耗降至最低。

零样本Sim2Real：仿真数据训练完成后，实现零样本迁移到真实世界，任务成功率超过真实数据训练。

 数据集矩阵

真实环境模型表现

左右滑动查看

超十万仿真场景，勾勒模型全景能力画像

模型评估不再仅限于“成功率”。Genie Sim Benchmark 3.0 构建了基于 10万+ 仿真场景的立体评估体系，结合LLM与VLM技术，从多个维度为模型绘制深度能力画像，是当前业界覆盖最全面、最权威的具身智能模型评估基准。

自动化评测生成：评测指令与步骤可由LLM根据场景语义自动生成，并转化为可执行流程。

多维度深度评估：通过视觉语言模型（VLM），从语义理解、空间推理、操作精度、时序逻辑等多维度进行综合评价，清晰揭示模型的能力边界与薄弱环节，指引明确的优化方向。

 理解能力评估

 操作能力评估

左右滑动查看

虚实一致的评测结果：仿真与真实世界评测差异<10%，模型验证无需真机部署，显著提升算法评测效率。

 真实-仿真环境模型表现对比

真实-仿真环境模型表现相关性分析

左右滑动查看

涵盖真实作业场景仿真

基于智元的规模化商用和工业落地经验，Genie Sim 3.0 是首个深度集成真实作业场景仿真数采与评测的开源平台，打通从实验室算法到工业应用落地。

真实作业场景还原：平台包含超市上货、物流分拣、电力巡检、物料搬运、产线装配等多个工商业场景的机器人作业环境。

全流程仿真验证：基于重建资产快速生成训练数据集与全流程评测系统，大幅降低数据采集成本与算法验证周期，实现“零硬件部署，全真实验证”。

02/

建开源共享，共创智能未来

今天Genie Sim 3.0 仿真平台将核心代码、海量高价值数据集以及数字资产全面开源，向全球开发者、研究者与产业伙伴开放。无论您是高校实验室的研究者，还是具身智能领域的算法工程师，或是来自制造业、物流业等领域的集成应用专家，Genie Sim 3.0 都将成为您研发、测试与验证的得力助手，为开发者搭建起 “所思即所得” 的创新舞台，让复杂的机器人开发变得更高效、更普惠，持续夯实通用机器人生态的数字基石。

2026年是具身智能规模化部署的关键之年，也是生态共荣的新起点。新年伊始，愿我们以 Genie Sim 3.0 为纽带，汇聚全球创新力量，在虚拟与现实的交融中突破更多可能，让智能机器人成为改变世界的新生产力。

祝每一位开发者灵感迸发、成果丰硕，与智元一同奔赴 “万级部署、亿级生态” 的崭新未来！

网址：智元在CES发布业内首个大语言模型驱动的开源仿真平台 Genie Sim 3.0 https://www.yuejiaxmz.com/news/view/1434421

相关内容

中国“机器人天团”集体亮相CES：从产品出口向品牌出海的战略转型
内蒙古联通发布智慧社区平台3.0，推动物业数字化转型
中国机器人军团，“围剿”波士顿动力
从个体到社会：基于大语言模型的Agent驱动的社会模拟研究综述
CES观察：AI无处不在，撑不起大模型的硬件家电，用助理机器人做外挂
聚焦CES 2025 | AI+超轻量仿人机械臂，睿尔曼展现具身智能多场景应用落地实力
阿里巴巴“AI驱动”战略提速 夸克发布自研大模型
CES｜吉利发布“智能汽车全域AI”，极氪智驾控制器应用英伟达Thor芯片 芝能汽车出品 在CES 2025上， 吉利 以及 极氪 品牌分别出牌，发布了一系列重磅内容和产品。 ● 吉利 科技发布了...
TCL实业CES展风采：AI驱动全场景智能变革，引领科技生活新潮流
能做家务的机器人不是梦！Meta 开源机器人最新进展（Habitat 3.0）

随便看看