/ Roadtovr / 0浏览

Oculus(Facebook旗下公司)通过增强的开发者工具扩展了Quest混合现实功能。

Oculus计划通过新工具进一步开放Quest的混合现实功能,使开发者能够构建更智能地与用户真实环境融合的应用。在不久的将来,开发者还将首次被允许通过Quest商店或Oculus App Lab向用户分发混合现实应用。

Oculus首先通过Passthrough API解锁了Quest的混合现实功能,使开发者能够在今年早些时候首次利用头戴设备的透视视频视图。现在,该公司宣布推出一套更高级的工具,称之为Presence平台,允许开发者构建更先进的混合现实应用。
Presence平台包括Insight SDK、Interaction SDK和Voice SDK。
Insight SDK
Insight SDK的主要构建块是Passthrough功能,开发者之前以实验形式使用过。这个功能将在下一个开发者更新中正式推出,不再处于实验形式。
此外,Insight SDK还包括Spatial Anchors,这使开发者可以在场景中放置虚拟物体,并允许这些物体在不同会话之间保持存在。例如,一个钢琴学习应用可以允许您标记钢琴的位置,然后无论何时打开应用,它都能记住钢琴的位置。

Insight SDK还包括Scene Understanding,Oculus表示这使开发者能够构建“能够与用户环境进行丰富交互的场景感知体验”。这包括对用户空间的几何和语义表示,意味着开发者可以看到房间的形状,并获得有关其中内容的有用信息。例如,Scene Understanding功能将允许开发者知道场景中的哪些部分是墙壁、天花板、地板、家具等,所有这些都可以作为放置虚拟内容的表面。

Oculus表示开发者将看到“一种单一、全面、实时的物理世界表示,可进行索引和查询”。您可以将此视为头戴设备在您周围构建地图,开发者可以在此基础上构建理解您物理空间的虚拟体验。然而,为了生成需要此地图的应用程序,用户需要进行一些工作,包括标记墙壁和描绘家具。

Oculus关键表示Insight SDK将使开发者能够构建功能丰富的混合现实应用,而无需访问Quest传感器的原始图像或视频。我们已经与该公司联系以进一步澄清,即Oculus是否会将头戴设备上的原始传感器图像发送出去进行处理,还是所有处理都在设备上进行。
根据公司的说法,Insight SDK的场景理解部分将在明年初以试验形式推出。
Interaction SDK
Presence平台的另一个组成部分是Interaction SDK,它将为Unity开发者提供一套简单交互的现成工具,如按下按钮、抓取物体、定位和选择。这样可以节省开发者构建自己应用中常用交互的时间。

Oculus表示Interaction SDK的目标是“提供标准化的交互模式,并防止技术发展导致跟踪性能退化”,还表示该系统将使开发者更容易构建自己的交互和手势。该公司表示,Interaction SDK(以及先前宣布的Tracked Keyboard SDK)将于明年初推出。
Voice SDK
Presence平台的Voice SDK部分将为Quest开发者开放语音控制,Oculus表示这可以实现简单的导航功能(例如通过声音快速启动您喜欢的Beat Saber歌曲)和游戏功能(例如通过语音发动法术)。
该系统基于Facebook的Wit.ai自然语言平台是免费使用的。Oculus表示声音软件开发工具包(Voice SDK)将以试验形式在下一个开发者版本中发布。
Quest Store和App Lab中的混合现实应用程序
虽然Presence Platform的不是所有SDK都将同时推出,但从下一个Quest开发者版本开始,开发人员将被允许通过Quest商店或App Lab发布混合现实应用程序。该版本预计将于下个月发布。
《The World Beyond》示例应用程序

明年初,Oculus将提供一个名为《The World Beyond》的示例项目,供开发人员用作在Presence Platform功能上构建的起点。该应用程序也将提供给用户使用。

0

  1. This post has no comment yet

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注