Nweon

名为《CLIP-Fields: Weakly Supervised Semantic Fields for Robotic Memory》的论文介绍了一种方法，可以从很少或没有标记的数据中学习3D语义场景表示，这对于机器人和XR有潜在应用。该方法使用弱监督的网络图像训练模型，在训练过程中使用语义和视觉标签嵌入。模型包括一个主干模型和目标特定头部。主干模型将空间中的位置映射到表示向量，而目标特定头部用于不同的任务，如语义标签嵌入和视觉情境嵌入。研究人员使用多尺度哈希编码来参数化主干模型。实验结果显示，该方法可以用较少或没有人工标注的示例来编码场景特定的语义信息，并在简单的“查看”任务中使用模型。未来的研究方向包括探索跨场景共享参数的模型，以及处理动态场景和对象。

索尼的《捉鬼敢死队》VR游戏改名为《捉鬼: 鬼王崛起》，将于2023年登陆Quest 2和Quest Pro。这款游戏由老牌VR工作室nDreams开发，由索尼旗下Sony Pictures Virtual Reality发行。游戏设定在美国旧金山，玩家可以在金门大桥等地标点捉鬼，最终面对一位鬼王Boss。游戏将提供完全沉浸式的捉鬼体验，让玩家感受到《捉鬼敢死队》宇宙中与最大反派的对抗。玩家可以独自进行冒险，也可以和最多三名朋友一起享受捉鬼奇遇。这款游戏的发布为《捉鬼敢死队》的粉丝带来了一场令人期待的新体验。

Quest 2是如何支持《Supernatural》VR健身应用中的提膝动作的呢？开发商Within通过Faceboo群组给出了答案。由于Quest 2一般只能捕获头部和手部的动作，难以真正识别下半身的动作。根据Within的创始人Chris Milk所说，他们开发了一种专门的算法来追踪抬膝动作，通过分析头部和手部的运动来推断是否进行提膝动作。该算法利用Quest 2的输入以及一个针对抬膝动作进行训练的AI模型，根据细微的动作来识别用户何时进行抬膝动作。虽然不是绝对精准，但对于需要用户通过抬膝动作来击碎巨大物体的要求来说已经足够。Chris Milk表示团队将继续优化模型，提供更准确的下半身追踪。此外，Meta也在积极探索基于IK的下半身动作推断方法，并提出了一种基于AI的纯头显全身Avatar动捕解决方案，无需光学标记。

VR游戏开发商ForeVR Games宣布已完成1000万美元A轮融资，由Lobby Capital领投，现有投资者Bessemer Venture Partners和Galaxy Interactive跟投。ForeVR Games将继续致力于开发类似任天堂Wii风格的VR休闲体育游戏。该公司曾在2020年12月完成种子轮融资，总融资额已达1850万美元，吸引了Twitch首席执行官埃米特·谢尔、Twitch联合创始人贾斯汀·坎以及Zynga创始人马克·平卡斯和贾斯汀·沃尔德隆等投资人。ForeVR Games由前Zynga员工马库斯·西格尔和迈克·帕加诺·杜姆创立，团队采用全远程工作制度，员工数量已达到44人，包括来自EA和Glu的经验人员。该工作室专注于为VR创造大众休闲娱乐游戏，类似于任天堂成功的Wii Sports风格。自2020年成立以来，团队已发布了三款游戏。ForeVR Games的首席执行官马库斯·塞格尔表示，他们希望在今年年底前发布第四款作品《ForeVR Pool》。

Meta前不久开源了一个名为Theseus的优化技术库，可用于可微分非线性最小二乘（NLS）优化。这个库基于PyTorch，适用于机器人和计算机视觉等领域，可以将领域专业知识融入AI架构。Theseus将知识表示为优化问题，并将其作为模块化的“优化层”添加到架构中，可以帮助模型实现更准确的预测。与训练数据不同，这种领域知识可以帮助模型实现更准确的预测。这个库融合了将AI系统中的领域知识注入的两种方法，并提供了端到端的深度学习模型。这样一来，研究人员可以将特定领域知识微调到最终任务损失中，提高模型的效率和泛化能力。此外，Theseus库还集成了稀疏解算器、GPU加速和隐式微分等功能，提高了计算和内存的效率。这个开源库的出现将有助于提高数据效率和泛化能力，并推动AI社区在多个任务和环境中取得更快的进展。

六自由度追踪是一种通过传感器确定设备相对于周围环境位置的方法，如混合现实头显或智能手机。为了实现多个设备之间共享体验，需要设备之间共享映射数据。微软的专利申请“Sharing neighboring map data across devices”介绍了一种相关技术。传统的方法包括外向内追踪和内向外追踪。外向内追踪需要外部定位传感器，而内向外追踪可以在设备内部确定位置。微软提出了一种设备之间共享映射数据的解决方案。该方案涉及服务器计算设备，通过生成锚的虚拟位置并将映射数据从一个设备传输到另一个设备实现共享。这种解决方案可以增加设备之间共享全息图的可靠性和自发性。通过该技术，用户可以共享和查看同一全息内容。该技术解决了传统方法中的传输速度慢、数据丢失以及映射数据一致性的问题。这项专利申请于2022年6月提交，并已获得美国专利商标局的公布。

过去传统的增强现实（AR）头显通过波导显示器将AR元素投射到眼睛，而现在的一些设备则利用外置摄像头拍摄物理环境，并在不透明显示器上显示。然而，这种透视AR技术存在困难，因为摄像头的位置与眼睛的位置不匹配，导致视角转换可能导致不适和视觉伪影。为解决这个问题，Meta的研究人员开发了一种创新的人工神经网络技术，名为NeuralPassthrough神经透视。这项技术利用深度学习和图像重建网络，通过合成数据集生成正确的透视结果。与其他透视方法相比，NeuralPassthrough提供了非常出色的图像质量，并满足透视校正立体注视合成的要求。然而，该技术仍然存在一些局限性，如对人工智能空间估计准确性的依赖以及计算能力的限制。Meta表示，为了提供令人信服的透视体验，图像质量需要取得重大进展，并解决计算设备移动处理器的限制。

本文介绍了2022年10月31日Oculus Quest、Oculus Rift和Steam平台最新的畅销VR游戏列表。其中，Rift Store和Steam是目前流行的PC VR内容平台，而Oculus Quest是国外主流的一体式6DoF移动VR平台。需要注意的是，这些畅销游戏列表都是实时变化的，括号内的价格表示正在促销的游戏原价。 接下来，文章提供了Steam VR游戏应用TOP 10、Oculus Quest游戏应用TOP 10和Oculus Rift游戏应用TOP 10的排名列表。这些列表显示了当时最受欢迎的VR游戏，供读者了解和参考。 最后，文中还附有一张图片，展示了排名前10位的游戏应用。

2022年10月13日，高通公司主办的2022 Qualcomm XR创新应用挑战赛在线上举行了颁奖典礼。本届比赛共设立了10个赛道，共有41个获奖名额，最终有39个优秀参赛作品获得了白金奖、金奖和银奖。其中，HOLO的《VR街舞教学》获得了2022 Qualcomm XR挑战赛VR行业组的银奖。 街舞是一种由全身肢体完成的动感舞蹈作品，具有花样多、变化快、力度强、动作难度高等特点。传统的线上线下教学方式存在局限，学习难度高，自由度低，学习效率低且周期长。而且，舞者常常依靠“感觉”学习，容易出错，导致出现常磕碰的现象。 HOLO的《VR街舞教学》将线上线下街舞教学的优点与VR相结合，并弥补了线上线下相互的缺点。它应用于现流行的虚拟人与直播环境下，形成了新型教学方案。通过在VR场景中模拟真实教师与学者的教学场景，提高了舞蹈学习的便捷性，改善了学者的观察方式，实现了更精准的学习，提高了学习效率，革新了传统的街舞学习方式，解决了用户的痛点。 HOLO是一支在AR/VR行业深耕多年的年轻团队，他们热爱舞蹈，热爱生活，热爱VR。团队创建了VR玩家交流社区，并致力于将VR新科技融入生活，改善生活，解决传统行业问题，并为下一代的新型计算机平台带来创新和变革的新体验。

由蓝鳍鱼团队开发的VR游戏《糖果冲刺》登陆NOLO平台，以卡通风格和糖果模型吸引了众多玩家。游戏玩法简单，玩家控制小糖果球在旋转隧道中快速奔跑，躲避棒棒糖和烟卷糖等障碍物，还要努力吃更多的星星糖以获得更好的成绩。简单来说，它类似于糖果版的《神庙逃亡》，主要考验的是反应速度。《糖果冲刺》原价9.8元，现在只需7元入手。与《糖果冲刺》相同的开发者还推出了另一款名为《无限坠落》的VR游戏，同样上线NOLO Sonic应用商店。玩家需要在游戏中控制自己的卡通形象，避免在高空坠落时碰到任何物品，坚持的时间越长，坠落速度越快，刺激性和难度也随之增加。NOLO Sonic应用商店目前已经上线了120余款VR游戏和应用，玩家可享受上线首周的7折优惠。NOLO将继续与国内外合作伙伴合作，为玩家带来更多身临其境的VR体验。