近日,智元机器人推出行业首个面向真实世界机器人操控的统一世界模型平台 Genie Envisioner,并宣布将开源全部代码、预训练模型及评测工具。
该平台创新性地将未来帧预测、策略学习与仿真评估整合进以视频生成为核心的闭环架构,首次实现机器人在同一世界模型中完成从感知到决策再到执行的端到端推理流程。
传统机器人学习系统普遍采用quot;数据收集—模型训练—策略评估quot;的分阶段开发模式,各环节相互独立且依赖任务特定调优,导致开发复杂度高、迭代周期长。
GE平台通过构建统一的视频生成世界模型,破解了这一碎片化架构瓶颈。基于约3000小时的真实机器人操控视频数据,平台建立了语言指令到视觉空间的直接映射,完整保留机器人与环境交互的时空动态信息。
核心突破在于视觉中心的世界建模范式。区别于主流VLA方法依赖语言抽象,GE直接在视觉空间中建模机器人与环境交互动态,实现对物理规律的精准捕捉。这一范式带来显著性能跃升:
跨平台泛化效率提升:在Agilex Cobot Magic等全新机器人平台上,GE-Act动作模型仅需1小时遥操作数据即可高质量执行任务,优于需大规模多本体预训练的π0和GR00T模型;
长时序任务执行突破:在折叠纸盒等超10步连续任务中,GE-Act成功率高达76%,关键归因于视觉空间显式建模时空演化的能力及创新的稀疏记忆模块设计。
技术架构由三大协同组件构成:
GE-Base多视角视频基础模型:采用自回归视频生成框架,通过头部与双臂腕部三路视角输入保持空间一致性,结合稀疏记忆机制增强长时序推理。训练分两阶段:3-30Hz多分辨率时序适应训练提升运动鲁棒性,5Hz固定采样策略对齐微调;
GE-Act平行流匹配动作模型:160M参数轻量架构通过交叉注意力机制将视觉表征转换为控制指令,采用quot;慢-快quot;异步推理,在RTX 4090 GPU实现200毫秒54步实时响应;
GE-Sim层次化动作条件仿真器:通过Pose2Image条件与运动向量编码,将控制指令精确转换为视觉预测,支持闭环策略评估与数据生成,每小时可完成数千次策略rollout。
为量化世界模型质量,团队同步推出EWMBench评测套件,从场景一致性、轨迹精度等维度评估建模能力。在Kling、OpenSora等模型对比中,GE-Base在关键指标均领先且与人类判断高度吻合。平台现已开放项目主页、论文及代码仓库,推动具身智能从quot;被动执行quot;向quot;想象—验证—行动quot;范式演进。
郑重声明:此文内容为本网站转载企业宣传资讯,目的在于传播更多信息,与本站立场无关。仅供读者参考,并请自行核实相关内容。
中国荣威全新第三代RX5试乘试驾品鉴会郑州站
9月24日,中国荣威全新第三代RX5试乘试驾品鉴会在郑州赛卡国际卡丁车俱乐部举行。本次品鉴...
进口宝马X5渠道收紧,国产版宝马X5成市场主流
《车矩阵》报道:想买进口版宝马X5抓紧了!宝马中国官网9月22日显示,进口版宝马X5已经下...
小鹏G9:听人劝,吃饱饭
刚上市两天就重新梳理车型命名与配置规划,小鹏G9的这番操作放在汽车圈里可是尤为罕见。当然,...
全新smart精灵#1首批交付盛大开启
不负期待,如约而至。今日,作为新奢纯电汽车科技品牌 smart的焕新之作,全新s...
只此青绿吉利星瑞2023款登陆重庆,11.37万元起能
今年的雾都在经历过夏季的高温之后,却早早的在初秋的9月带来了丝丝凉意。不过细雨蒙蒙的天气却...
福特“小猛禽”确定国产,价格简直不要太亲民
严格来讲,以前皮卡在国内并没有太大市场,但随着皮卡在各地的解禁,在国内也是水涨船高。而提到...
闪耀璀璨自我 Ms. Audi女性艺术嘉年华传递“真我
9月21日-9月25日,一汽奥迪携手慧谷家族、青年艺术100,在京举办以“MY!关于我”为...
东风日产纯电告白夜暨ARIYA上市发布会即将开启!!
近日,东风日产ARIYA全国媒体试驾会引起车友广泛关注,不少车友表示期待ARIYA尽快上市...
可充可换可升级,飞凡R7上市在即又放补能大招
虽然还没有正式上市,但是作为飞凡旗下首款旗舰产品,号称“目前唯一集齐三大领域最顶级硬件的车...
2022年9月23日、26日、28日,即将上市的4款新
在很多行业中素来都有着“金九银十”的说法,在汽车行业也不例外,每年的九月至年底都可以算是国...
都是纯电豪华MPV的顶流,谁才是更好的选择?
有人说MPV尤其是中、高端MPV是中国自主品牌的蓝海,今年新能源汽车市场的火热,也带火了中...
中国影豹银河战机版梦幻上市,售13.68万,宇宙星河为
9月21日,中国影豹银河战机版正式上市,新车售价13.68万元,轻奢梦幻造型引爆新世代的小...
别光看数据, 安全才是纯电轿跑最重要的产品力
如今新能源车的销量快速增长,越来越多的厂家推出了自己的纯电动车型。但是消费者对于纯电动车的...
绿动未来 创势新生,上汽奥迪Q5 e-tron定义纯电
风朗气爽的9月,上汽奥迪于浙江安吉举办了本次“绿动未来创势新生”奥迪Q5e-tron全国媒...
中国荣威全新第三
9月24日,中国荣威全新第三代RX5试乘试驾品鉴会在郑州赛卡国际卡丁车俱...
进口宝马X5渠道
《车矩阵》报道:想买进口版宝马X5抓紧了!宝马中国官网9月22日显示,进...