除了改进手部追踪和增强场景理解能力外，visionOS 2 还引入了 3D 对象追踪，这是一种全新的追踪功能。

这些跟踪改进没有在 WWDC24 的主要主题演讲中宣布，但 Apple 工程师在在线提供的开发者会议上详细介绍了它们。

自推出以来，Vision Pro 已经能够跟踪指定的 2D 图像，例如标记和游戏板。在visionOS 2中，它也可以跟踪3D对象。

在编译应用之前，开发者必须将跟踪的 3D 对象作为 USDZ 3D 模型提供给其 Mac 上的“创建机器学习”工具。Create ML 将为每个对象训练一个神经网络，该神经网络将被烘焙到应用程序中。

这意味着用户无法提供自己的任意 3D 对象，并且跟踪新对象需要更新应用程序。尽管如此，对于商业和教育用例或跟踪常见对象来说，这可能是一个非常有用的功能。

该系统将提供一个具有比例和方向的边界框，开发人员可以使用它来将虚拟对象锚定到跟踪的对象上，甚至用 3D 效果增强它们。

来源：uploadvr