Nweon

美国专利及商标局最近公布了一批AR/VR专利。其中包括了Magic Leap、Facebook、Microsoft、Apple、Google、Valve、Sony和AMD等公司的专利。这些专利涵盖了多个方面，包括语音处理引擎的输入方法、虚拟和增强现实显示系统的连续时间扭曲、光纤扫描仪的屈曲模式致动、手势控制的虚拟内容投射和操纵、显示器的畸变控制、各向异性衍射光栅组件、无监督一次性机器学习方法用于手势分类和作用力估计、光敏反射器用于紧凑型显示模块组件、增加光谱线宽和改进激光控制、环境中移动对象的表面重建等。这些专利显示了AR/VR技术领域的创新和进展。

混合现实科技公司Nreal宣布已完成4000万美元的B1轮融资，由快手领投，红杉资本中国基金、金浦科技基金、高瓴创投和中电中金基金跟投。势能资本担任独家财务顾问。此次融资使得Nreal的总融资额超过了7000万美元。历史投资人包括顺为资本、华创资本、光大控股新经济及特斯联、洪泰基金、爱奇艺、新松创投等。Nreal表示，未来将继续扩展国内外商业机会，并积极推动行业内外的生态合作。他们将在5G产业环境下探索混合现实技术与多元应用场景的结合。

谷歌与斯坦福人工智能实验室合作撰写的论文介绍了一种通过直接预测透明对象的3D关键点来估计其深度的机器学习系统。为了训练这个系统，研究团队收集了透明对象的真实世界数据集，并手动选择了三维关键点来标记它们的姿态。谷歌训练了一种名为KeyPose的深度模型，使其能够根据单目图像或立体图像端到端地估计3D关键点，不需计算深度。论文指出，使用立体图像作为早期融合深网的输入可以提高关键点估计的精度。研究团队拍摄了15种不同透明对象的图像，并使用了10种不同的背景纹理，最终生成了一个真实世界透明对象的图像数据集。论文展示了KeyPose对单个对象和类别级别的定性和定量结果，并提供了相关研究的链接和补充材料。谷歌表示，他们希望通过公开这个数据集来促进透明对象领域的发展，并在未来的研究中探索自我监督的方法来消除手动标记。

英伟达在Reddit上的问答中确认，DLSS深度学习超采样抗锯齿技术的新版本DLSS 2.1已经推出。DLSS 2.1带来了一系列的创新，包括超级性能模式。利用这一模式，虚拟现实开发的游戏将能够获得DLSS支持。DLSS 2.1是一种可以以8K分辨率超性能畅玩游戏的模式，同时支持GeForce RTX 3090提供8K游戏，并提供一个新的9x缩放选项。DLSS 2.1将支持VR，为虚拟现实游戏带来深度学习超采样抗锯齿技术，提高帧速率，生成精美、清晰的游戏图像。 DLSS是指深度学习超级采样，英伟达致力于通过基于AI的超高分辨率重新定义实时渲染。简单来说，系统可以渲染更少的像素，然后使用AI构建更清晰、更高分辨率的图像。DLSS 2.0通过全新的时间反馈技术，在渲染四分之一到半数像素的前提下，提供与原始分辨率相媲美的画质，提高图像细节和帧与帧之间的稳定性。这项技术可以为玩家提供充足的性能，同时有助于最大化光线追踪设置，并提高输出分辨率。

Facebook Reality Labs Research（FRLR）最近分享了他们的最新音频计划，旨在将该技术应用于AR头显中，并允许用户在嘈杂的环境中隔离人声并重现虚拟声音，使其听起来像来自真实世界。一个定制的耳朵传输函数（HRTF）是实现这种体验的关键。然而，测量HRTF需要耗时且昂贵的过程，所以FRLR团队正在研究一种根据耳朵照片生成准确HRTF的可扩展解决方案。 此外，FRLR还希望利用音频来增强面对面的交流，并研发情景感知的降噪技术。这种技术旨在隔离用户不希望听到的外界声音，同时保留用户希望听到的声音。为了实现这一目标，FRLR团队制作了原型耳塞和包含麦克风、头部和眼动追踪功能的原型眼镜。利用这些信息，专门的算法将判断用户希望听到的内容，并突出显示特定对象的声音，同时减少其他声音。 显然，这项技术的最终目标是应用于AR和VR头显，但尚不清楚什么时候才能实际应用于市场中。

VirtualLink联盟发布了一项旨在满足VR头显连接要求的USB-C连接协议，得到了众多VR厂商的支持。该协议的目标是通过单个USB-C端口连接VR头显和PC，避免使用多个接口和电源线。然而，VirtualLink没有得到广泛的重视，似乎已经被官方抛弃。初始发布时，英伟达、AMD、微软、Valve、Oculus和HTC等重要硬件厂商都支持VirtualLink。虽然最初看起来有发展势头，但是由于一些原因，VirtualLink的进展停滞不前。AMD从未为任何显卡添加VirtualLink支持，英伟达的第二波RTX20系列卡也放弃了支持VirtualLink的USB-C端口，Valve也取消了VirtualLink适配器计划。VirtualLink官网现在会跳转到VirtualLink的维基百科条目。至今，VirtualLink联盟尚未发表评论。

根据Valve公布的数据显示，2020年8月Steam平台的VR玩家月活占比减少了0.23%，降至1.7%。与此同时，Steam平台上Oculus Quest的市场份额连续五个月增长，达到11.15%。对于8月份的数据，Oculus品牌市场占比增长了1.07%，达到46.69%，其中Quest的占比增加了1.02%，达到11.15%，是Steam平台第五大头显。其他品牌如HTC则持续下降，市场占比从上月的28.82%降至27.13%。Valve品牌的市场占比从上月的14.45%增加至15.55%，是上个月的第一。WMR品牌市场份额略有降低，从上月的7.36%下降至7.07%。另外，Steam开始统计一体机串流的VR头显设备，包括Riftcat、ALVR等。

任天堂在2020年的超级马里奥35周年直面会上发布了一款新的AR游戏作品，名为《Mario Kart Live: Home Circuit》。这款游戏是《马里奥赛车》系列的一部分，在Nintendo Switch主机上进行。玩家可以使用Switch主机来操纵一辆实体赛车玩具，并在屏幕中看到一系列的数字内容，如赛道、障碍物和道具等。玩家可以根据自己的喜好来定制比赛场地，并解锁各种赛道和服装定制选项。游戏支持本地多人模式，最多可以与四个玩家一起畅玩，但每个玩家都需要拥有自己的Switch主机和马里奥/路易吉卡丁车。尽管官方发布的信息有限，但从视频中可以看出，游戏使用了AR技术，栏架似乎用作AR视觉标记，并帮助定义轨道边界。马里奥/路易吉卡丁车将于10月16日发售，售价为99美元。已经开放了预购官网，任天堂表示即将公布与预购窗口相关的信息。

HTC首席执行官伊夫·迈特雷因个人原因辞职，而公司董事长王雪红将再次担任首席执行官。公司表示，新冠疫情导致的旅行限制使迈特雷无法与家人团聚，对他造成了巨大影响，因此董事会接受了他的辞职请求。迈特雷于2019年9月接任HTC首席执行官，承诺将这家陷入困境的科技巨头带入一个新时代，通过HTC Vive产品线加倍投入沉浸式现实技术。 在今年2月接受《财富》杂志专访时，迈特雷提到了与Facebook的竞争以及尚未成为主流的虚拟现实技术。他将Facebook的虚拟现实战略比喻为福特汽车的T型车，即试图提供功能强大且注重价格的产品。而对于HTC，他表示更倾向于欧洲汽车制造的方式，注重细分市场，提供针对每个市场需求的专门产品。 目前尚不清楚HTC是否会寻找新的首席执行官，或者是否由王雪红继续兼任。

映维网报道称，Virtual Desktop近期进行了更新，大大提升了无线PC VR游戏的运行速度，并且为Oculus Quest玩家提供了更多的性能优化选项。根据1.15版本的设置面板，新增了VR图形质量选项，用户可以调整渲染和流式传输分辨率。全新的低质量选项优先考虑帧率和延迟，而高质量选项则优先考虑分辨率。低质量选项适合搭载旧款显卡但希望获得更优无线VR性能的玩家。此外，用户可以单独调整PC和VR的帧率以优化无线传输延迟和图像质量。新版本的Virtual Desktop还提供了一个允许在VR中配置游玩空间的追踪选项，适合那些需要旋转游玩空间的游戏。Virtual Desktop一直以其快速更新和优化支持无线头显畅玩PC VR体验的功能而闻名。1.15版本还修复了一系列的问题，并在开发一款全新的MacOS beta版本。