Manus数据手套凭借毫米级25自由度手部动作捕捉能力,正在成为触觉驱动机器人学习的核心数据入口,打通了人类精细操作经验向机器人灵巧智能迁移的关键链路。

打开网易新闻 查看精彩图片

核心技术支撑体系

高精度动作采集‌:MANUS Metagloves Pro采用电磁场追踪方案,有线模式端到端延迟仅30ms,无线模式控制在50ms以内,120Hz采样率可完整覆盖人手精细操作的动作细节,避免视觉方案的遮挡、漂移问题。

双向触觉闭环链路‌:Metagloves Pro Haptic将25自由度动作追踪与实时振动触觉反馈结合,机器人侧的接触、滑移、力值变化可直接转化为操作者可感知的振动信号,形成“人手动作-手套追踪-机器人执行-触觉反馈回传”的完整交互闭环。

全生态数据打通‌:原生支持接入英伟达Isaac Sim生态,MANUS Core可将原始传感器数据解算为关节位置、关节角度等多层级数据,通过重定向器直接转换为适配目标机械手的控制指令,实现仿真环境与实体硬件的无缝数据同步。

标杆研究落地案例

T-Rex触觉反应灵巧操作项目‌:加州大学伯克利分校、英伟达与斯坦福大学联合团队,基于MANUS手套搭建遥操作数据采集平台,同步记录人手动作、视觉观测、指尖触觉传感器数据,构建了100小时覆盖200+日常物体的多模态数据集。训练出的T-Rex模型在12个接触丰富的操作任务中,平均成功率超过最强基线30%,解决了传统视觉VLA模型无法推理接触点物理状态的核心难题。

Touch2Trace无视觉线缆循迹系统‌:亚德诺半导体Dexterous AI Group团队利用MANUS Metagloves Pro遥操作Tesollo DG-5F灵巧手,同步记录机器人关节数据与32×32 TacV5触觉传感器读数,训练出自监督触觉编码器与轻量Transformer策略,实现机器人完全不依赖视觉即可完成柔性线缆的抓取、送进与循迹操作,具备零样本迁移到全新布线场景的能力。

工业场景落地价值

大幅降低示教门槛‌:一线熟练工人的精细操作动作可通过手套直接采集、映射并复现到灵巧手上,无需工程师花费数周调试控制策略,原本需要复杂编程才能实现的小零件捏取、旋钮旋转、接头插拔等操作,现在通过短时间示教即可完成部署。

提升仿真到真机迁移效率‌:引入触觉反馈的遥操作示教数据,天然包含精准的接触时序与握力调整信息,训练出的机器人策略更贴近真实物理工况,大幅降低仿真环境与现实世界的“迁移鸿沟”,让工业装配、高危环境作业等场景的机器人部署速度显著提升。

构建规模化触觉数据集‌:支持与Xsens全身动捕系统数据打通,将人体全身姿态与手部动作整合为统一数据流,避免多设备同步的时序错位问题,可快速批量生成高质量的触觉同步示教数据,为具身智能大模型提供充足的训练素材。

关于搜维尔科技

我们热衷于动作捕捉技术的研发与推广。我们热衷于推动技术发展,使其处于技术前沿甚至更前沿。在这个频道上,我们想分享我们基于动作捕捉技术的最新体验。搜维尔科技与Manus数据手套总部签署代理合作协议,成为其在中国大陆地区一级官方代理商。搜维尔科技现支持相关产品购买、咨询与售后支持等服务,欢迎垂询。