6月17日消息,大晓机器人联合香港中文大学多媒体实验室发布全新具身操作VLA模型ACE-Ego,并面向行业开源。该模型在国际人形机器人操作基准RoboCasa GR1 TableTop上以72.8%的平均成功率刷新纪录,在高难度双臂操作基准RoboTwin 2.0上以90.62%的成功率展现环境鲁棒性。
据介绍,ACE-Ego基于“以人为中心”的ACE研发范式,通过统一相机空间动作表示、统一本体形态编码、时间对齐动态分块、可靠性自适应目标函数四大核心机制,破解了人机数据在空间坐标系、本体结构、时序频率、标签质量上的四重异构难题,实现大规模人类第一视角视频与多型机器人数据的协同训练。
实验显示,引入第一视角人类视频进行联合预训练后,模型在RoboCasa基准上的成功率从68.3%提升至72.8%。目前,ACE-Ego已能完成塑料袋打包、鞋子装入鞋盒等长周期零售操作,覆盖商品整理、打包履约等环节。(崔玉贤)
打开网易新闻 查看精彩图片
热门跟贴