Nweon

美国专利和商标局最近公布了一批AR/VR专利，以下是其中的一部分。苹果的专利涉及通过头戴式显示设备向用户提供叠加在现实世界的计算机生成内容。Magic Leap的专利包括空间音频系统和虚拟化身面部表情表示。Facebook的专利涉及手势输入自动完成和光栅的技术。微软的专利包括手持对象姿态的确定、根据注视点调整注视点位置以及基于注视点的目标操纵系统。高通的专利涉及点云的压缩。Valve的专利描述了虚拟对象的握持和释放。索尼的专利包括声音输出组件、虚拟现实视觉图像、以及虚拟交互游戏世界的观众视图。英特尔的专利包括无碰撞运动的自动交通机器、远程方向控制的无人机和生成全景视频的模块化楔块。

Oculus Quest搭载了一个用于调整双眼间距的IPD滑块，但用户无法精确知道滑块的调整参数。然而，Quest自身能够测量IPD设置，并有望通过软件更新向用户提供相应信息。Quest已通过软件更新实现了多项优化，例如Passthrough+技术提供更低延迟和更准确的视觉效果，未来还将支持手部追踪和PC系留功能。该设备有望在未来的软件更新中增加IPD说明器，以便用户更轻松地设置透镜间的正确距离，提高视觉保真度和舒适度。虽然其他支持物理IPD调整的头显通常提供数字读数，但Quest尚未支持此功能。据Oculus发言人表示，公司正在考虑增加数字读数功能，但没有透露具体时间。通过软件更新来实现这个功能是因为Quest的IPD滑块已经内置了测量电子器件，可以测量自身的IPD设置。通过数字读数，用户可以更轻松地调整IPD。虽然用户可以依靠感觉进行主观猜测，但这不够精确，缺少校准参照。Quest提供了一个校准屏幕，但这是一个笨拙且不靠谱的方法。因此，数字读数可以方便地将IPD调整到已知值。目前确定自己的IPD测量值是一个麻烦的过程，尤其是在眼动追踪组件出现更多头显之前。未来，希望支持自动IPD调整的头显能够更加无缝。

魔法跳跃（Magic Leap）与皇家莎士比亚剧团合作，利用空间计算技术重新演绎了莎士比亚的《皆大欢喜》中的名篇“人生七阶”。他们通过混合现实和卡尔弗城的体三维工作室，捕获了演员的表演精髓，并以“桌面剧院”的形式呈现作品，让用户可以选择舞台位置，围绕舞台走动，从不同角度感知表演。 这个合作项目于2018年开始，Magic Leap与皇家莎士比亚剧团以及伦敦金史密斯大学、朴茨茅斯大学和NESTA合作，通过混合现实为戏剧和莎士比亚作品寻找全新的体验方式。通过长时间的创意和技术讨论，团队选择了在树下的草地上表演，场景在不同季节中循环变换以反映人生不同阶段。团队还使用空间计算技术整合音效和配乐，录制了完整的空间音频，使演员的声音与所在位置相关。 这只是重新构想戏剧表演和观众体验的第一步，Magic Leap将继续与皇家莎士比亚剧团合作，通过“Audience of the Future”项目扩展真人表演的可能性。

音频对于虚拟现实（VR）体验非常重要。Ambisonics是一种环绕声技术，可以在水平面和听者上方和下方的区域提供覆盖，对于沉浸式体验来说，Ambisonics是一种重要的可选音频格式。AMD的Fellow设计工程师Carl Wakeland撰文介绍了TrueAudio Next Acceleration和Steam Audio在三阶Ambisonics中的应用。声音设计师通常会专注于直达声的精确空间3D渲染，而很少关注声音反射。然而，在游戏或体验中实现逼真的声音反射可以提高真实感和可信度。Ambisonics是一种能够以可扩展的分辨率渲染空间反射的3D音频编码格式，其中的Higher Order Ambisonics（HOA）在逼真的声音反射方面尤其有效。Steam Audio是一个强大的音频SDK，可以轻松增加逼真的物理建模声音反射。通过利用Steam Audio和AMD TrueAudio Next (TAN)加速，可以支持更多音频源的三阶Ambisonics音频反射。在示例中展示了三阶Ambisonics渲染反射相对于非空间化（零阶）音频反射的优势。声音设计师被鼓励尝试TAN加速并感受具体的差异。

VR动作游戏《Ninja Legends》的开发商Coinflip Studios通过博文介绍了如何为快节奏的交互优化性能。他们的解决方案包括使用后台线程来进行简单操作，降低CPU频率以节省能量，使用对象池来缓解实例化效果的成本，跨帧激活视觉效果以减小影响，减少物理交互的复杂性。通过这些技术，他们为Oculus Quest开发了一种终极的忍者体验。

斯坦福大学虚拟人机交互实验室进行了一项关于增强现实（AR）宠物动物对用户感知和行为的研究。他们表示，虚拟宠物可以影响主人的感知和行为，尽管它们缺乏物理表现，但具有真实和灵活的视觉外观和模拟行为潜力。该研究通过模拟虚拟狗在AR环境中的行为互动，调查了AR狗对用户运动行为、空间关系学和社交行为的影响。结果显示，拥有AR宠物狗会影响用户的运动行为、空间关系学和社交行为。此外，狗对其他人的感知和行为能够对主人的知觉产生积极影响。这项研究只是初步的探索，研究人员计划进一步研究真实人类和虚拟动物的交互以及更长时间的影响。他们认为，随着AR技术与人工智能和物联网等领域的结合，AR动物的互动能力将不断提升，因此进一步的研究是必要的。

据报道，美国专利商标局公布了一份与头显相关的苹果专利申请，该申请描述了一种可以穿戴戴于用户头部的头戴式显示设备，可以向用户提供叠加在现实世界的计算机生成内容的功能。该头显设备包括具有透明显示器的可调节透明度系统，透明显示器可以通过光耦合器向用户提供图像，用户可以通过光耦合器查看现实世界的对象。控制电路可以控制透明显示器在现实世界的选定位置显示计算机生成内容。此外，可调节透明度系统包括可调节的不透明层和光致变色层，可调节的不透明层可以阻挡或减弱来自真实世界对象的光线，以改善数字对象的对比度。专利申请还包括其他光学组件和紫外线吸收材料，以提供更好的用户体验。苹果表示，该发明技术可以应用于虚拟现实和增强现实系统的头显设备，以及其他设备，如智能手机、平板电脑等。目前尚不清楚苹果是否会商业化这项技术。

SpaceVR与Pico联手将所谓的“Overview Effect”带给普通大众。这种效应指的是当宇航员在太空漫游时，能够从前所未有的角度感受地球的美妙，从而产生一种特殊的震撼感。SpaceVR和Pico在最近的xRS Week大会上提供了基于国际空间站的3D 360度“环绕地球”虚拟现实体验，利用了Zerobody反重力床和Pico头显。用户可以感受到仿佛真的在太空中漂浮的令人难以置信的体验。SpaceVR创始人Ryan Hlomes表示，他们致力于将虚拟现实技术运用于改善生活和整个文明，让世界变得更美好。除了提供太空卫星、虚拟现实和内容服务，SpaceVR还是全球首家提供防水、防盐、耐热VR头显的公司。他们的目标是为成千上万的用户提供浮水箱和干式浮床中的治疗、保健和教育等零重力体验。

Steam最近推出了“Remote Play Together”功能，玩家可以邀请非本地朋友一起畅玩本地多人游戏，而被邀请的玩家不需要购买游戏。这项功能还支持非对称VR内容，玩家可以使用VR头显进行游戏，而朋友则可以远程控制PC。通过非对称VR游戏《Panoptic》的测试，发现这个功能可以让你轻松与没有头显的朋友分享VR的乐趣。 《Panoptic》是一款VR游戏，玩家分为VR玩家和PC玩家，VR玩家扮演监督者，PC玩家扮演破坏者，破坏者需要混入NPC队伍中破坏目标而不被监督者发现。由于虚拟现实的效果，监督者的巨大身形给PC玩家带来了紧张感，营造了紧张的猫鼠追逐氛围。然而，游戏的乐趣受限于本地玩法，即VR玩家和PC玩家必须在同一房间内。 通过Remote Play Together功能，现在可以邀请非本地玩家一起游戏，并提供PC的游戏控制权限。这个功能非常适合《Panoptic》的玩法，VR玩家扮演监督者，远程玩家控制PC的视图，只要提供稳定流畅的传输带宽，游戏就能像本地体验一样进行。 此外，Remote Play Together功能还可以支持多个朋友轻松加入和退出游戏，方便大家轮流扮演PC角色。通过测试，发现这个功能展示了游戏的社交潜能。

Facebook最近公布的专利涉及到毫米波手部追踪技术，该技术可以精确地追踪手部动作和姿势。目前，手部追踪系统主要采用惯性运动追踪或光学运动追踪技术。惯性运动追踪通过内置的传感器确定手部的移动和姿势，但不能准确捕捉手部在空间中的位置，且会受环境干扰。光学运动追踪则需要用户佩戴标记以确定手部位置和姿势。因此，Facebook探索了使用毫米波应答器作为手部追踪的新解决方案。该专利描述了一个系统，包括可定位手套和姿势确定组件。可定位手套包括手套主体和多个定位应答器，定位应答器将接收到的信号重新发射。姿势确定组件包括多个天线和控制器，天线接收定位应答器重新发射的信号，并据此确定手套的位置和姿势。这项名为“Millimeter Wave Hand Tracking”的专利最初于2018年1月提交，并最近被公布。