10月16日,智元创新(上海)科技股份有限公司联合英伟达、普林斯顿大学、得克萨斯大学奥斯汀分校、多伦多大学等机构的研究人员,发布动作驱动世界模型评测平台WorldOracle,并开放评测提交。
WorldOracle着重衡量世界模型对机器人动作执行结果的预测准确度,而非仅看生成视频质量;平台将模型预测画面与机器人真实操作过程对照,检验模型对物理交互结果的预测能力。
目前,WorldOracle已收录335条真实操作轨迹,覆盖水果抓取、毛巾悬挂、倒水、抽屉开合等任务,其中约40%的交互片段包含失败或次优操作。
研究团队对7个代表性世界模型评测后发现,当前模型在机械臂运动预测上相对较好,但对物体状态变化预测偏差较大,长时序预测表现明显下降,复杂交互结果预测仍显不足。
机器人场景中,模型可能生成画面逼真却与真实执行相反的结果,例如实际抓取失败却被预测为成功,进而可能令机器人高估自身能力。
模型预测结果提交后,将与真实执行数据对比以评估性能,并为世界模型在机器人规划、策略评估及训练等场景中的应用提供参考。
市场有风险,投资需谨慎。本文为AI基于第三方数据生成,仅供参考,不构成个人投资建议。
本文源自:市场资讯
作者:知叙
热门跟贴