/ Roadtovr / 0浏览

Quest开发者现在可以发布利用头戴设备摄像头扫描世界的应用程序。

虽然Meta的Quest一直依赖于摄像头来跟踪头显、控制器和用户周围的环境位置,但开发者并没有同样的特权来访问头显的摄像头。今年早些时候,Meta给予开发者在私有项目中直接访问头显摄像头的能力;从本周开始,开发者现在可以公开发布利用这一新功能的应用。

本周Quest的Passthrough Camera API更新意味着开发者现在可以发布直接访问Quest 3和3S前置摄像头的应用到Horizon商店。这为第三方应用打开了大门,这些应用能够扫描用户周围的世界,从而更好地理解环境。例如,开发者可以添加计算机视觉能力,以跟踪场景中的物体或人物,或者为环境构建地图以进行分析和互动。

由于Meta对开发者能够在头显硬件上做的事情施加的限制,长期以来这一点是不可行的。尽管计算机视觉能力在智能手机上已广泛提供给开发者,但Meta对于在其头显上允许同样的功能一直持谨慎态度,显然是出于隐私担忧(同时,这也无疑受到公司过去面对众多隐私争议的影响)。

之前,第三方应用可以获取一些关于用户周围世界的信息——比如房间的形状和其中物体的布局——但这些信息是通过系统提供的,方式使得应用无法直接看到摄像头能够看到的内容。这使得开发者能够构建在某种程度上了解用户周围空间的混合现实应用,但也使某些用例变得困难甚至不可能;例如,追踪用户手持的特定物体。

去年Meta宣布它将最终解锁对头显摄像头的直接访问。在3月份,它向开发者提供了这一功能的实验版,允许他们构建访问头显摄像头的应用。但直到现在,他们才被允许将这些应用发布到公众。

该公司还具体说明了开发者可以在Quest 3和3S上访问的摄像头的技术能力和性能:

图像捕获延迟:40-60毫秒
GPU开销:每个流式摄像头约1-2%
内存开销:约45MB
数据速率:30Hz
最大分辨率:1280×960
内部数据格式:YUV420

Meta表示,开发者在Quest上使用摄像头数据受其开发者数据使用政策的覆盖,包括“用户数据的禁止使用”一节,禁止某些数据使用,包括“执行、促进或提供监视工具”和“唯一识别设备或用户,除非政策中允许”。