除了改进手部追踪和增强场景理解能力外,visionOS 2 还引入了 3D 对象追踪,这是一种全新的追踪功能。
这些跟踪改进没有在 WWDC24 的主要主题演讲中宣布,但 Apple 工程师在在线提供的开发者会议上详细介绍了它们。
自推出以来,Vision Pro 已经能够跟踪指定的 2D 图像,例如标记和游戏板。在visionOS 2中,它也可以跟踪3D对象。
在编译应用之前,开发者必须将跟踪的 3D 对象作为 USDZ 3D 模型提供给其 Mac 上的“创建机器学习”工具。Create ML 将为每个对象训练一个神经网络,该神经网络将被烘焙到应用程序中。
这意味着用户无法提供自己的任意 3D 对象,并且跟踪新对象需要更新应用程序。尽管如此,对于商业和教育用例或跟踪常见对象来说,这可能是一个非常有用的功能。
该系统将提供一个具有比例和方向的边界框,开发人员可以使用它来将虚拟对象锚定到跟踪的对象上,甚至用 3D 效果增强它们。
来源:uploadvr
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.