一个Vision Pro开发者发布的视频似乎展示了苹果新头盔目前具备的手部追踪和遮挡功能。

预计将在接下来的几个月中发布的苹果Vision Pro将使用手部追踪作为其主要的输入方式。虽然系统级的交互将手部追踪和眼部追踪结合起来，实现了“看一看点击”的方式，但开发者也可以构建允许用户直接使用手部与应用程序进行交互的应用。
Vision Pro上的手部追踪可以分为两个不同的能力：‘手部追踪’和‘手部遮挡’。
手部追踪是手部的估计3D模型、关节和指尖的位置。该模型用于确定何时触摸、抓取和与物体进行交互。
手部遮挡处理的是系统如何将你的真实手部叠加在虚拟内容上。与将虚拟手部的3D模型绘制到场景中不同，Vision Pro将真实手部的图像剪切出来，以代替虚拟场景中的手部。这样做可以增加虚拟内容的逼真感，因为你能看到自己独特的双手。
一位使用Unity为Vision Pro进行开发的开发者发布了一个视频，清楚展示了手部追踪和遮挡。

在上述视频中，真实的手部展示了遮挡系统的工作情况，而绿点显示了手部的估计3D位置。

我们可以看到，手部遮挡效果很好，但并不完美；当完全被虚拟内容包围并且迅速移动时，可以看到手部边缘出现了一些剪切现象。
与此同时，实际手部追踪的位置要落后于手部遮挡，大约在100-200毫秒之后。我们不能准确确定Vision Pro手部追踪的真正延迟，因为我们只能通过与遮挡追踪的手部进行比较来了解（遮挡追踪本身与真实手部之间也会有一些延迟）。
在这种情况下，该视频来自于一位Unity开发者的交流，他们的Vision Pro早期实验显示出非常高的手部追踪延迟，显然与最新的Quest手部追踪能力相比如此。其他Unity开发者也表示，他们自己的Vision Pro设备上也看到了类似的延迟。
然而，所讨论的视频是在Unity应用程序中实现的手部追踪集成，这意味着手部追踪的性能和延迟可能还存在与Unity相关的其他因素，在使用苹果的Vision Pro一方开发工具时则不存在这些因素。而且考虑到这款头盔尚未上市，并且这些工具还在开发中，等到头盔真正上市之时可能会有进一步的改进。