10月30日,大晓机器人联合南洋理工大学S-Lab发布机器人世界模型Mundo。该模型支持三维场景重建、自由视角探索和物理交互,可将少量图像或视频转化为可探索、可交互的三维世界。与传统场景重建技术不同,Mundo能够将物体的质量、摩擦等物理属性纳入场景,通过物理引擎计算运动、接触与碰撞。
据介绍,Mundo支持输入1至12张图像构建三维场景,并生成不同视角的探索画面;面对更大场景,还可连续生成数十秒至分钟级的视频。此外,模型支持通过代码编辑物体属性与动作,并模拟机器人导航、物体抓取和操作等任务,为机器人训练提供仿真环境。
目前,Mundo已应用于酒店场景,团队利用其重建酒店楼层与洗衣区域,为机器人导航提供空间信息,并模拟洗衣机开门等交互。在大晓机器人以Kairos为核心的世界模型技术体系中,Mundo进一步补充了环境建模、训练数据生成与仿真训练能力,助力机器人适应真实场景。(木槿)
热门跟贴