这项装置得以实现，得益于理工大学机器人学系 (RBT)和机械工程系，以及欧盟人工智能事务中心(AI Matters EU)的合作，推动了人机交互的未来发展，并展示了人体运动捕捉和先进机器人控制之间的强大协同作用。

打开网易新闻 查看精彩图片

产品

  • MANUS Metagloves Pro
  • MANUS Core ROS 2软件包（通过SDK 许可）

背景

TESOLLO公司，通过精确的运动控制、先进的嵌入式系统和人工智能的智能集成，重新定义了机器人自动化。其旗舰产品DG-5F是一款全驱动五指拟人化机器人手，旨在实现媲美人类的灵巧性、抓握力和控制力。它拥有20个自由度（DOF），完美融合了高精度机械结构、可选触觉传感功能和灵活的软件兼容性，使其成为科研、工业自动化和服务机器人等领域的理想应用。

打开网易新闻 查看精彩图片

挑战

使用传统输入方式控制像DG-5F这样拥有20个自由度的机械手极具挑战性。手动编程或操纵杆控制通常会导致延迟、精度低以及学习曲线陡峭。为了解决这些问题，TESOLLO开发了ROS2软件包，使机械手的控制更加直观高效。

除了展现出色的灵巧性之外，DG-5F的功能还可以通过安装在 Franka Research 3机械臂上并配合NOKOV位置跟踪系统而扩展到实际应用场景。这种集成显著提高了系统的灵活性、机动性和执行复杂操作任务的能力。

打开网易新闻 查看精彩图片

解决方案

借助MANUS Metagloves Pro和MANUS Core ROS 2软件包。

我们利用TESOLLODG-5F开发了一套无缝的人机远程操作流程。NOKOV光学跟踪系统作为 Franka Research 3机械臂的位置锚点，为人机运动的精确对准提供空间参考。

  • 实时手指追踪：MANUS Metagloves Pro能够以毫米级的精度捕捉操作者的手指和手部动作，并以超低延迟传输数据
  • ROS2 集成：MANUS Core ROS 2软件包将 SDK（包括位置和手指追踪数据）封装成一个与 ROS2兼容的接口，以便于集成
  • 位置跟踪：NOKOV光学跟踪系统为Franka机械臂提供精确的空间参考点，确保人与机器人动作的精准对齐
  • 远程操作控制层：手指姿态数据映射到DG-5F手，而位置数据驱动Franka机械臂，从而实现全臂远程操作，并具有自然、直观的控制。

未来潜力

通过此次合作，TESOLLO展示了MANUS Metagloves Pro、ROS2集成和光学跟踪的结合如何实现高度灵巧的远程操作工作流程。

然而，由于人手和机器人手的运动学差异，精细化的远程操作仍然面临挑战。MANUS 的末端传感器数据流传输技术提供了一条前进的道路，使DG-5F等机器人手能够随着时间的推移学习和改进其运动模型。该项目重点展示了如何将高保真运动数据与自适应控制相结合，从而为未来更智能、数据驱动的操作系统铺平道路。

关于搜维尔科技

我们热衷于动作捕捉技术的研发与推广。我们热衷于推动技术发展，使其处于技术前沿甚至更前沿。在这个频道上，我们想分享我们基于动作捕捉技术的最新体验。搜维尔科技与Manus总部签署代理合作协议，成为其在中国大陆地区的授权代理经销商。搜维尔科技现支持相关产品购买、咨询与售后支持等服务，欢迎垂询。