首个机器人世界模型开源平台发布
近日,智元机器人推出行业首个面向真实世界机器人操控的统一世界模型平台 Genie Envisioner,并宣布将开源全部代码、预训练模型及评测工具。
该平台创新性地将未来帧预测、策略学习与仿真评估整合进以视频生成为核心的闭环架构,首次实现机器人在同一世界模型中完成从感知到决策再到执行的端到端推理流程。
传统机器人学习系统普遍采用quot;数据收集—模型训练—策略评估quot;的分阶段开发模式,各环节相互独立且依赖任务特定调优,导致开发复杂度高、迭代周期长。
GE平台通过构建统一的视频生成世界模型,破解了这一碎片化架构瓶颈。基于约3000小时的真实机器人操控视频数据,平台建立了语言指令到视觉空间的直接映射,完整保留机器人与环境交互的时空动态信息。
核心突破在于视觉中心的世界建模范式。区别于主流VLA方法依赖语言抽象,GE直接在视觉空间中建模机器人与环境交互动态,实现对物理规律的精准捕捉。这一范式带来显著性能跃升:
跨平台泛化效率提升:在Agilex Cobot Magic等全新机器人平台上,GE-Act动作模型仅需1小时遥操作数据即可高质量执行任务,优于需大规模多本体预训练的π0和GR00T模型;
长时序任务执行突破:在折叠纸盒等超10步连续任务中,GE-Act成功率高达76%,关键归因于视觉空间显式建模时空演化的能力及创新的稀疏记忆模块设计。
技术架构由三大协同组件构成:
GE-Base多视角视频基础模型:采用自回归视频生成框架,通过头部与双臂腕部三路视角输入保持空间一致性,结合稀疏记忆机制增强长时序推理。训练分两阶段:3-30Hz多分辨率时序适应训练提升运动鲁棒性,5Hz固定采样策略对齐微调;
GE-Act平行流匹配动作模型:160M参数轻量架构通过交叉注意力机制将视觉表征转换为控制指令,采用quot;慢-快quot;异步推理,在RTX 4090 GPU实现200毫秒54步实时响应;
GE-Sim层次化动作条件仿真器:通过Pose2Image条件与运动向量编码,将控制指令精确转换为视觉预测,支持闭环策略评估与数据生成,每小时可完成数千次策略rollout。
为量化世界模型质量,团队同步推出EWMBench评测套件,从场景一致性、轨迹精度等维度评估建模能力。在Kling、OpenSora等模型对比中,GE-Base在关键指标均领先且与人类判断高度吻合。平台现已开放项目主页、论文及代码仓库,推动具身智能从quot;被动执行quot;向quot;想象—验证—行动quot;范式演进。
声明:本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。文章事实如有疑问,请与有关方核实,文章观点非本网观点,仅供读者参考。
精彩阅读
-
首个机器人世界模型开源平台发布...
近日,智元机器人推出行业首个面向真实世界机器人操控的统一世界模型平台GenieE... -
东风风神L8开启预售20万内最舒适豪华座舱来了...
8月11日,东风新旗舰、东风奕派科技全新战略车型mdash;mdash;东风风神... -
奥迪、蔚来、特斯拉、途虎等争相入局,这一市场终究是巨头的游戏?...
最近,下沉市场这个以前不太受到关注的“小透明”,仿佛一夜间成为了各路汽车大神眼中... -
小米汽车回应“未收车先结清尾款”;前荣耀CEO赵明否认加盟智界汽车...
OEMTrend 快科技:8月12日,特斯拉官方宣布,Model3长续航后... -
MATERI’ACT推出纤维增强复合材料可用于汽车外观零部件...
盖世汽车讯据外媒报道,可持续材料供应商MATERI’ACT公布了其在汽车行业注塑... -
锦湖为起亚Tasman提供原配OE轮胎...
middot;CrugenHT51,锦湖的四季轮胎,适用于公路和越野驾驶,将配备... -
RhoMotion:7月全球电动车销量同比大增21%,但增速放缓...
盖世汽车讯据路透社报道,8月13日,市场研究机构RhoMotion称,今年7月份... -
驰行绿途,科技赋能-佳通709E系列,领航新能源物流新纪元...
在能源结构变革与城市物流升级的双轮驱动下,新能源商用车正加速驶入发展快车道。20... -
重塑大六座SUV市场格局,领克900上市百天交付破2万领跑细分市场...
2025年8月10日,领克品牌在广州与张家口双城同步启幕百台领克900集体交付盛... -
大陆集团汽车子集团以“AUMOVIO”品牌亮相IAA...
盖世汽车获悉,大陆集团汽车子集团将首次以全新独立公司AUMOVIO欧摩威集团的身... -
逸安启超充800kW二代桩上线,充电步入分钟级时代...
2025年6月,由华晨宝马汽车有限公司与梅赛德斯-奔驰投资有限公司,以50:50... -
潮野浪夏燃擎出发坦克300享多重金融与用车无忧礼遇...
炎炎夏日,正是释放野性、探索自然的绝佳季节。为回馈广大用户的热爱与支持,即日起至... -
问界汽车:8月新增订单预计交付周期将缩短至5-7周...
,问界汽车官方发布“关于问界用户近期热门问题”,针对高温技改对交付的影响、增程版... -
总投资超5亿元!又一企业亚太总部落地上海嘉定...
具体来看,该项目位于安亭镇泰波路8号A5工厂地块,总投资超5亿元,将专注新能源汽... -
冯兴亚称华望是广汽与华为深化合作的关键落子...
广汽集团董事长冯兴亚日前发文,将华望明确为广汽与华为深化合作的关键落子。他表示,...