中经实习记者 徐倩 记者 石英婧 上海报道
第一视角(Ego)视频让数据采集从专业场地走进真实生活和工作,成为具身智能预训练的重要数据来源。但拍下操作,并不意味着就能获得具身模型预训练所需的4D数据,系统还需要准确辨认佩戴者的双手、还原手指的弯曲姿态,并测量手在空间中的移动距离。
《中国经营报》记者从觅蜂科技方面获悉,近日,觅蜂科技联合西北工业大学、西安交通大学发表论文,提出第一视角运动重建框架“MEgoVista”,用以将第一视角(Ego)视频更精准地转化为4D数据。论文实验结果显示,MEgoVista在Ego视频上具备较高的重建精度,可将无需预先布置场景的第一视角录制数据,有效转化为具有真实尺度的双手动作和头部运动轨迹。
该论文研究结果显示,在制作奶茶、美甲、给宠物洗澡三类真实场景测试中,MEgoVista表现出更强的环境适应性。
觅蜂科技方面对记者表示,公司正持续推进MEgo系列设备量产,以及数据采集、治理和评测能力建设。此次MEgoVista的研究成果,为这一布局提供了新的技术支撑:在拓展数据来源的同时,提高三维动作重建精度,让真实生活的数据更好地服务于具身模型训练。
(编辑:石英婧 审核:童海华 校对:张国刚)
热门跟贴