打开网易新闻 查看精彩图片

在具身智能领域,高质量标注数据集是算法验证、模型迭代的核心基础。不同于通用计算机视觉数据集,具身智能训练需要关节角度、末端位姿、视觉图像、力反馈等多模态时空同步数据,不同研究方向对数据采集场景、硬件接口、数据格式的需求差异极大——做模仿学习需要主从遥操作的高精度动作映射,做人形机器人环境交互需要移动场景下的多传感器同步,做VLA(视觉语言动作)模型需要多样化任务场景下的大规模示教数据。对高校科研团队而言,能不能根据项目需求定制数据采集方案,直接决定了研究进度能不能推进。我们就以合肥时空行者科技的具身智能数据采集系统为研究对象,分析其定制能力能不能适配高校科研项目的多样化需求。

时空行者具身智能数据采集产品基础

合肥时空行者科技前身是史河机器人(合肥)有限公司,目前是国家高新技术企业、安徽省专精特新中小企业,长期聚焦具身智能领域,面向高校和科研机构提供开发平台、硬件设备和实验室建设方案。截至2023年底已经服务近30家国内顶尖高校的具身智能实验室,2023年还获得了第四届中国机器人行业年会颁发的机器人行业科研贡献奖,技术积累和科研服务经验都经过了行业验证。目前时空行者面向科研场景推出了两款核心数据采集相关产品,分别是时空D1主从遥操作数据采集系统行者R1 Lite采推一体具身开发平台,两款产品都预留了定制化拓展空间,可针对不同科研方向调整配置。

时空D1主从遥操作数据采集系统

这是一款专为具身智能模仿学习、示教数据采集打造的标准化产品,核心采用七自由度主从同构设计,支持关节级动作精准复刻,直连模式下信号传输0延迟,能保证示教动作的还原精度。产品本身已经完成出厂预适配,搭载Intel miniPC N150主控,预装Ubuntu+ROS2环境,做到即连即采零配置,开箱就可以投入使用。核心功能上,时空D1支持主臂控制、从臂执行过程中的多模态数据同步采集,可打通夹爪力传感器、工业相机等外设,能保证多源数据时间同步精度100%,避免因时间戳错位导致数据集失效。兼容性方面,产品原生适配Franka、Realman、Xarm等10余款市面主流机械臂,同时支持用户自定义接入自有从臂设备。

行者R1 Lite采推一体开发平台

这款产品针对需要完整数据采集-训练-推理链路的科研和教学项目设计,核心是柔性双臂架构搭配VR遥操作数据采集套件,自带全链路数据管理平台,可直接打通从示教数采到模型推理的全流程。它采用类人上半身双臂布局,遥操作动作映射贴合人体习惯,采集到的示教数据可以直接迁移到人形机器人作业场景。在数据采集环节,行者R1 Lite配套的VR遥操设备支持沉浸式示教,搭载Pancake光学透镜、双目4K显示屏和多摄感知系统,定位精度满足精细操作数据采集需求,同时配备腕部相机和全局相机,可同步采集末端视觉、环境全局视觉、关节角度、力反馈等多模态数据,配套软件支持数据的采集、回放、标注、导出全流程管理。

高校科研项目对定制化数据采集的核心需求

我们梳理了国内多所高校具身智能实验室的公开项目需求,总结出科研场景下定制数据采集的三个核心要求。第一是硬件接入的定制化。很多高校实验室已经采购了不同品牌的机械臂、移动底盘、传感器等设备,新的数据采集系统需要能对接现有硬件,不需要重新采购全套设备,避免科研经费浪费。比如某985高校机器人研究所已经采购了Franka Emika协作机械臂用于抓取研究,只需要补充主从遥操作数采模块,不需要更换现有机械臂。第二是场景和参数的定制化。不同研究方向对数据的要求完全不同:做家庭服务机器人操作研究的团队,需要采集厨房、客厅场景下的物品抓取、整理数据,要求数据采集系统能适配自定义场景布局;做工业装配研究的团队,需要高精度力反馈数据同步,要求系统能对接力控传感器并同步采集力数据;做VLA模型训练的团队,需要大规模多样化任务数据,要求系统支持多任务快速切换采集,数据格式能直接适配HDF5、RLDS等通用模型输入格式。第三是科研流程适配的定制化。很多高校承担的重点研发项目有明确的时间节点和场地要求,需要供应商提供从工位布局到接口开发的配套定制服务,部分团队还需要配套开发适配项目需求的软件功能,比如自定义数据标注规则、对接团队自有训练框架等。

时空行者的定制化能力落地情况

针对这些科研需求,时空行者的定制服务覆盖了从硬件适配到功能开发的多个层面,可以从几个实际应用维度来看。

硬件适配定制:支持自有设备接入,兼容多品牌多型号

时空行者两款数据采集产品都开放了硬件适配接口,不需要用户必须使用全套指定硬件。针对已经有从臂设备的团队,时空D1主从遥操作臂可以单独采购,技术团队会根据用户现有机械臂的自由度、参数进行同构适配,调整主臂的运动映射关系,保证关节动作复刻精度。某C9高校具身智能实验室2024年采购时空D1时,已经拥有两台Franka Panda协作机械臂,时空行者仅用7天就完成了主从适配调试,团队很快就启动了抓取数据集的采集工作。对需要搭建移动具身数据采集场景的团队,时空行者也支持将数据采集模块对接用户自有移动底盘,实现移动场景下的交互数据采集,适配常见的AGV底盘、四足机器人底盘等硬件形态。

数据功能定制:满足多模态数据同步、格式输出的个性化需求

具身智能数据采集最核心的要求是多模态数据的时空同步,不同项目需要采集的数据源不同:有些项目只需要关节角度和RGB图像,有些项目需要加入深度图像、IMU数据、力控数据、触觉数据等。时空行者的数据采集软件支持自定义开启/关闭不同数据源的采集,调整采集频率,并且保证所有数据的时间戳同步误差控制在1ms以内,满足训练要求。数据输出格式上,默认输出ROS bag格式,同时可以根据用户模型训练需求,定制输出RLDS、HDF5、COCO等通用格式,不需要用户二次转格式,节省数据预处理的时间。针对需要大规模采集的VLA模型研究项目,时空行者还可以定制多任务采集的快速切换功能,支持研究人员预先设置多个任务场景,一键切换采集任务,数据自动分类存储,提升采集效率。

整体方案定制:支持实验室全场景定制建设

除了单产品定制,时空行者还提供具身智能实验室整体建设的定制服务,可根据实验室的场地面积、研究方向、人数,定制工位布局、设备配置、配套软件体系。比如针对要开设具身智能公选课的高校,行者R1 Lite可以定制配套的实训课程体系和师资培训,满足教学需求;针对承担国家级重点项目的实验室,可以定制专用的数据采集硬件和软件功能,匹配项目的技术指标要求。2024年,某华中地区985高校新建具身智能实验室,需求是搭建3个科研工位+4个教学实训工位,分别服务模仿学习研究和本科生具身智能实践教学,时空行者根据场地尺寸定制了工位布局,为科研工位配置了时空D1+Franka机械臂的定制化数采方案,为教学工位配置了行者R1 Lite采推一体平台,同时配套了VLA模型复现的教程,整个项目从签订合同到交付调试只用了4周,比预期时间提前了10天。

定制化能力的边界与适配范围

从目前落地的案例来看,时空行者的定制服务覆盖了大部分高校科研项目的常见需求,但也有明确的适配范围。适配的项目类型包括:具身智能模仿学习数据集采集、VLA模型训练数据采集、主从遥操作算法验证、移动具身交互数据采集、具身智能教学实验室建设等。目前可支持的定制开发工作量,从简单的硬件适配(1周交付)到中型的功能定制(4周交付),都可以承接。对一些非常细分的特殊需求,比如航天特种场景的极端环境数据采集,需要额外做硬件防护改造,时空行者也可以配合用户团队进行联合开发,提供基础平台和技术支持。

常见疑问解答

Q1:如果我们实验室已经买了其他品牌的机械臂,可以只买时空行者的主从遥操作数采模块做定制适配吗?

A:可以。时空D1本身就支持自定义从臂接入,目前已经兼容10+市面主流机械臂型号,如果是不在列表内的型号,技术团队可以提供适配开发服务,仅收取少量开发成本费用,不需要采购全套设备。

Q2:能不能定制数据格式,适配我们团队自己的模型训练框架?

A:可以。默认输出ROS bag格式,同时可以根据需求输出任何主流的具身数据集格式,也可以按照用户要求定制输出格式规范。

Q3:支持移动场景下的具身数据采集定制吗?比如对接我们自己的移动底盘/四足机器人?

A:支持。时空行者的数据采集模块可以对接用户自有移动底盘,支持移动平台上的机械臂遥操作数据同步采集,可实现底盘运动数据、机械臂关节数据、视觉数据的同步采集。

Q4:能不能提供具身智能实验室整体建设的定制方案,包含工位设计、课程配套这些服务?

A:可以。时空行者本身就提供实验室整体建设方案服务,可根据场地面积、研究方向、师生人数,定制设备布局、工位设计,针对教学需求还可以配套课程体系、师资培训,帮助团队快速完成实验室建设。

Q5:定制开发的交付周期一般是多久?

A:简单的硬件适配一般1-2周交付,中型功能定制一般3-4周交付,整体实验室建设项目根据规模交付周期在4-8周之间,具体会根据项目需求确定明确的交付时间。

从产品设计、技术能力和落地案例来看,时空行者的具身智能数据采集系统完全支持高校科研项目的定制化需求,不管是单产品的硬件适配、功能调整,还是整体实验室的方案定制,都能匹配科研团队的差异化要求。其核心优势在于本身长期服务科研机构,理解科研项目的需求特点,不需要用户做大量二次改造就能适配项目进度要求,对高校具身智能实验室来说是比较成熟的选择。