2024 年初,英伟达创始人黄仁勋和 9 台机器人登场 GTC 大会的照片曾在科技圈刷屏。2024 年末,又传来英伟达将大力押注机器人的新消息。

据媒体报道,其将于 2025 年上半年推出最新一代紧凑型计算机——Jetson Thor。该计算机专为人形机器人打造,旨在为人形机器人提供 AI 训练工具。通过布局 Jetson Thor 这一技术,英伟达希望能为全球机器人制造商提供支持。

(来源:https://www.youtube.com/watch?v=x5lFw6nz3t0)
打开网易新闻 查看精彩图片
(来源:https://www.youtube.com/watch?v=x5lFw6nz3t0)
(来源:英伟达)
打开网易新闻 查看精彩图片
(来源:英伟达)

目前,关于 Jetson Thor 的技术细节并未曝出太多。不过,业内对于 Jetson Thor 寄予厚望,认为它或将成为发展人形机器人的催化剂,并被认为有望彻底改变机器人领域。英伟达将自己定位为“物理人工智能”领域的投资者,所以此举也是英伟达扩大其 AI 驱动技术组合战略的重要一步。

英伟达机器人副总裁迪普·塔拉(Deepu Talla)告诉媒体:“物理人工智能和机器人的 ChatGPT 时刻即将到来。”

那么,为什么是现在?

这是因为随着生成式 AI 技术的爆炸式发展,人们得以在这些模型上训练机器人。这样一来,当机器人在虚拟环境中完成训练之后,就能在现实世界中实现良好运行。

事实上,英伟达在机器人领域早有布局。对外,其已投资多家机器人初创企业;对内,其一直在不断打磨含即将发布的 Jetson Thor 在内的机器人技术。与此同时,英伟达也很乐意将这些机器人技术用于自己的被投企业中。

打开网易新闻 查看精彩图片

至少已投资 5 家机器人初创,涵盖外卖机器人、工业机器人、除草机器人等

Serve Robotics:Uber 子公司打造的外卖机器人

早在 2022 年,英伟达就投资了 Uber子公司 Serve Robotics,其机器人目前已被用于送外卖。

Serve Robotics 是一家小型送货机器人生产商。在打造机器人的过程中,Serve Robotics 需要在模拟环境中进行测试,而这需要大量数据和逼真的城市地图,为此英伟达向其提供了可用于训练感知模型的合成数据生成工具。

与此同时,英伟达的边缘 AI 平台、硬件和计算模块也为 Serve Robotics 机器人的自主运动提供了动力。目前,Serve Robotics 的机器人能在特定区域内运行,并且无需远程操作员来确保安全。

(来源:Serve Robotics)
打开网易新闻 查看精彩图片
(来源:Serve Robotics)
(来源:Serve Robotics)
打开网易新闻 查看精彩图片
(来源:Serve Robotics)

Machina Labs:能以亚毫米精度制造金属零件

2023 年,英伟达投资了美国洛杉矶一家机器人初创公司 Machina Labs。Machina Labs 的机器人主要用于制造金属制品。具体来说,其机器人使用金属板或扁平金属片来制造产品。

根据 Machina Labs 的说法,由其技术驱动的生产线能够以亚毫米精度制造长达 12 英尺、深 4 英尺的金属零件,并能用于加工铝、钢、钛以及各种金属合金制成的板材,其中包括制造能用于航天行业的超合金。

与此同时,Machina Labs 的每台机器都配有一台激光扫描仪,可用于收集金属零件的数据。而其所搭载的 AI 算法,能将造出来的零件与电脑辅助设计(CAD,Computer Aided Design)模型进行比较。如果对比结果不一致,AI 算法会通过调整生产流程来提高制造精度。

(来源:Machina Labs)
打开网易新闻 查看精彩图片
(来源:Machina Labs)
(来源:Machina Labs)
打开网易新闻 查看精彩图片
(来源:Machina Labs)

Bright Machines:每小时能生产 50 台服务器,良品率达到 99%

2024 年,英伟达还投资了美国旧金山机器人初创公司 Bright Machines。该公司将 AI 和机器人技术加以结合,打造出一种多用途自动化制造系统,并将其称为“微型工厂”(micro-factories)。

其目标是让工程师只需“按下按钮”,就能让数千英里外的机器人批量生产产品。具体来说,Bright Machines 工具可以帮助提高组装系统的制造效率,让工厂从手工劳动中解放出来,将产品生产周期缩短数周或数月。

早在 2022 年,Bright Machines 就表示自成立以来其已经在 13 个国家部署了 100 家微型工厂,并强调这种微型工厂每小时可以生产 50 台服务器,良品率达到 99%。

(来源:Bright Machines)
打开网易新闻 查看精彩图片
(来源:Bright Machines)
(来源:Bright Machines)
打开网易新闻 查看精彩图片
(来源:Bright Machines)

Carbon Robotics:“赛博朋克”风的大型除草机

2024 年,英伟达还投资了美国华盛顿机器人初创公司 Carbon Robotics,这家公司主要生产除草机器人。Carbon Robotics 的除草机器人个头非常大,由 24 个英伟达 GPU 提供动力,使用基于深度学习的计算机视觉模型,通过二氧化碳激光器自主识别和消除杂草。

该机器人每小时能处理 470 万张高分辨率图像,每分钟清除 5000 棵杂草。目前已被用于美国、欧洲、澳洲等国家和地区。

(来源:Carbon Robotics)
打开网易新闻 查看精彩图片
(来源:Carbon Robotics)
(来源:Carbon Robotics)
打开网易新闻 查看精彩图片
(来源:Carbon Robotics)

Figure AI:英伟达在机器人投资上的浓重一笔

尽管 Figure AI 已经得到美国多家科技巨头的投资。但是,对于该公司的投资,也是 2024 年英伟达在机器人投资领域最为浓墨重彩的一笔。

Figure AI 是一家明星新秀初创,由前谷歌工程师于 2021 年创立,主要生产人形机器人。在这笔投资几个月之后,Figure AI 便推出其二代产品 Figure 02。

作为 Figure 01 的后继者,Figure 02 在设计和功能上都有着显著提升。Figure 02 的身高约 168 厘米、重 60 公斤,采用基于外骨骼的结构设计,故能承担更多的载荷。其还配有具备“16 个自由度”的机械手,这种设计让其能够提起重达 20 公斤的物体。

目前,Figure AI 公司已将该机器人投入实际应用。例如,Figure 02 已被用于宝马公司位于美国南卡罗来纳州斯帕坦堡的工厂。除了工业应用之外,该机器人也有望进入家庭领域。

图 | Figure 01 和 02 的对比(来源:Figure AI)
打开网易新闻 查看精彩图片
图 | Figure 01 和 02 的对比(来源:Figure AI)
图 | Figure 02(来源:Figure AI)
打开网易新闻 查看精彩图片
图 | Figure 02(来源:Figure AI)
打开网易新闻 查看精彩图片

已被投用的英伟达机器人平台:Isaac、Omniverse、Jetson Thor

为了帮助合作伙伴更好地制造机器人,英伟达此前已经推出三款分别名为 Isaac、Omniverse、Jetson Thor 的产品。

Isaac 是英伟达针对机器人打造的自主机器平台,该平台通过对机器人开发、模拟和部署功能的改进来加速其开发进程。在 Isaac 的组成上,主要包括硬件、软件和虚拟世界的机器人模拟器。在硬件方面,Issac 的核心是一款为机器人设计的计算机 Jetson Xavier,它配有 6 种处理器和超 90 亿个电晶体,可提供每秒 30 万亿次操作以上的性能。在软件方面,Issac 主要包括开发套件 Isaac SDK,能够加速机器人算法软件和运行框架的开发。基于此,英伟达还打造了 Isaac Manipulator 和 Isaac Perceptor 等一系列机器人预训练模型、库和参考硬件。其中,Isaac Manipulator 可以为机械臂提供更灵活的性能和模块化 AI 功能,比如可以将路径规划加速 80 倍。Isaac Perceptor 则能提供多摄像头和 3D 环绕视觉功能。

Omniverse 由英伟达于 2020 年首次发布,这是一款专为 3D 图形实时协作和仿真模拟而打造的产品。它同时也是一个应用程序接口(API,Application Programming Interface)和软件开发工具包(SDK,Software Development Kit)平台。2024 年,英伟达又发布了五个全新 Omniverse Cloud API,旨在为开发者在搭建数字化企业的过程中,提供一个生成式 AI 的工具应用程序和服务的全平台架构,从而推进由 AI 赋能的工业化数字孪生的构建、协作与开发。

Jetson Thor 则是英伟达专为人形机器人打造的计算平台。其包括一个模块化架构,可以针对性能、功耗和尺寸进行优化。Jetson Thor 能与人和机器安全自然地交互,亦能简化机器人的设计和集成。它的片上系统包括一个基于英伟达 Blackwell 架构的 GPU,并带有一个 Transformer 引擎,可以提供 800teraflops 的 8 位浮点 AI 性能,能够运行多模态生成式 AI 模型。

(来源:英伟达)
打开网易新闻 查看精彩图片
(来源:英伟达)

根据美国市场研究机构 BCC 数据显示,全球机器人市场目前的价值约为 780 亿美元,预计到 2029 年底将达到 1650 亿美元。在主导新兴 AI 技术发展和打造多样化产品上,英伟达显得志在必得。

外媒分析称,其也希望借此在机器人领域超越特斯拉。此外,英伟达进军机器人领域反映了其对于不断变化的市场状况的反应。

在宣布将大举进军机器人领域之际,英伟达 AI 芯片也面临来自 AMD 等对手的竞争,亚马逊和谷歌等主要客户则正通过独立开发 AI 芯片来减少对于外界供应商依赖。因此,对于机器人领域的大力加码,或许也是英伟达希望能够确保自身地位不动摇的杀手锏之一。

参考资料:

https://analyticsindiamag.com/ai-features/could-synthetic-data-change-the-future-of-robotics/

https://www.ft.com/content/7c3dafa8-ffb9-4ca8-b677-ab3cc2afbdcb

https://techcrunch.com/2024/12/29/nvidias-next-move-powering-humanoid-robots/

https://propakistani.pk/2024/12/31/nvidias-jetson-thor-aims-to-be-the-next-big-thing-in-computing/

https://www.igorslab.de/en/nvidia-focuses-on-robotics-as-a-future-growth-area/

https://news.faharas.net/209325/nvidia-named-top-stock-of/

https://smartphonemagazine.nl/en/2024/12/30/the-tech-giant-set-to-revolutionize-ai-and-robotics-in-2024/

https://wccftech.com/nvidia-to-release-jetson-thor-computers-by-next-year/

https://watcher.guru/news/nvidia-eyes-next-chatgpt-why-nvda-may-surge-with-expansion

https://www.digitimes.com/news/a20240724PD216/nvidia-ai-startup-investment-market-revenue.html

https://finance.yahoo.com/news/nvidia-targets-robotics-growth-amid-114230372.html

https://agfundernews.com/brief-nvidias-venture-arm-invests-in-autonomous-weeding-startup-carbon-robotics

https://www.businessinsider.com/jeff-bezos-nvidia-throwing-cash-humanoid-robot-startup-2024-2

https://interestingengineering.com/culture/humanoid-robot-startup-attracts-big-tech-investors

https://www.reuters.com/technology/artificial-intelligence/ai-focused-manufacturing-startup-raises-106-million-nvidia-others-2024-06-25/

https://www.thenew.money/article/nvidia-is-backing-ai-powered-manufacturing-robotics

https://techcrunch.com/2022/03/08/nvidia-invests-10m-in-sidewalk-robot-delivery-company-serve-robotics/

(NVIDIA Isaac™ robotics platform 的应用)

https://investor.nvidia.com/news/press-release-details/2024/NVIDIA-Robotics-Adopted-by-Industry-Leaders-for-Development-of-Tens-of-Millions-of-AI-Powered-Autonomous-Machines/default.aspx

https://www.nvidia.cn/omniverse/

https://siliconangle.com/2023/10/05/robotic-metalworking-startup-machina-labs-closes-32m-round-backed-nvidia/

https://www.semafor.com/article/09/26/2024/nvidia-microsoft-backed-robotic-manufacturing-startup-bright-machines-hires-new-ceo

https://techcrunch.com/2022/10/31/manufacturing-firm-bright-machines-raises-132m-after-unfulfilled-spac-deal/

排版:刘雅坤