Nweon

初创公司AR-Generation专注于开发支持iOS和Android的3D扫描应用MagiScan，允许开发者利用智能手机摄像头捕获任何物体并创建详细的3D模型，用于AR或元宇宙应用。团队估计MagiScan的速度比设计师手动创建3D模型快10倍，成本低100倍，并提供了将3D模型导出到NVIDIA Omniverse的扩展。英伟达对MagiScan进行了介绍，与AR-Generation首席执行官西达丘克共同开发了基于人工智能的3D扫描应用MagiScan，利用智能手机摄像头捕获物体并快速创建高质量的3D模型，用于AR或元宇宙应用。AR-Generation现在提供了将3D模型导出到NVIDIA Omniverse的扩展，并利用Universal Scene Description框架作为数字内容创建工具之间的通用语言。西达丘克表示，增强现实将成为日常生活中不可或缺的一环，MagiScan可以比设计师手动创建3D模型的速度快10倍，成本低100倍。对于选择为Omniverse构建扩展，是因为它提供了方便的环境，并集成了3D和生成式人工智能的所有工具。西达丘克最喜欢Omniverse的功能之一是它的Universal Scene Description兼容性，从而能够无缝交换3D数据。基于这个框架，MagiScan的扩展可以快速创建任何物体的高质量3D模型，帮助用户节省时间和金钱。

圣安德鲁斯皇家古典高尔夫俱乐部（Royal & Ancient Golf Club）计划与Golf 5合作推出首个VR高尔夫大奖赛，允许PICO 4 Meta Quest和Steam等平台的用户参赛。据悉，该VR公开赛将于2023年7月15日启动。比赛将使用Golf 5的VR高尔夫模拟器，玩家可以选择多个不同的球场进行比赛，并通过挥杆动作来训练和提升球技。此次合作旨在吸引新的受众参与高尔夫运动，并利用虚拟现实技术提供沉浸式的真实体验。公开赛将在2023年8月19日结束，总冠军将获得相关奖杯和2024年VR公开赛门票，其他类别的冠军将获得限量版纪念品。

研究人员提出了一种名为神经双工辐射场（NDRF）的新方法，用于实时新视点合成。他们通过学习预训练的神经辐射场（NeRF）中的双工辐射场来构建这种新方法。为了提高渲染质量，他们使用了卷积着色网络，并采用了多视图蒸馏策略来优化模型。该方法在实时渲染方面取得了显著的改进，同时改善或保持了渲染质量，计算成本也大大降低。与现有的高效NeRF方法相比，该方法具有更低的计算成本。 然而，从NeRF中提取有用的双工网格来表示透明或半透明场景是一项挑战。此外，几何代理的质量会直接影响神经表征的学习。另外，目前该方法主要关注对象级和有界场景数据集，因此如何有效地渲染无界场景仍是一个未来的研究方向。此外，实验表明，较大的可学习参数对于获得更好的渲染质量至关重要，因此未来的研究可以考虑提高片段着色器中较大CNN的运行效率或利用其他加速框架。

为了支持科研创新，高通研究院在北美、欧洲和印度等地设立了高通创新奖学金（Qualcomm Innovation Fellowship）。该奖学金邀请特定大学的学生参加单一竞赛形式，获奖学生将在下一学年获得4万美元的奖学金，并由一名高通研究员担任导师。最近，高通公布了高通创新奖学金欧洲的获奖名单，其中清华大学本科生、苏黎世联邦理工学院硕士和博士生Siwei Zhang凭借在AR/VR方面的研究获得4万美元的奖金。随着XR的发展，高通正加强对XR领域和骁龙Spaces的投入，将XR设备作为一个重点关注领域。今年的高通创新奖学金欧洲共有12名候选人最终赢得奖学金，其中包括苏黎世联邦理工学院的Siwei Zhang。她的研究课题是面向AR/VR的计算机视觉方面，标题为《Interaction-aware Learning of 3D Human Motions and Behaviors from Egocentric Views（自中心视图的三维人体运动和行为的交互感知学习）》。高通指出，人工智能驱动的AR/VR设备正在改变医疗、教育和娱乐等行业，将交互感知纳入研究可以解决相关局限性。高通将向Siwei Zhang提供4万美元的奖金，并委派一名高通导师协助她完成这项研究。高通表示，他们相信科研是驱动想象力和发现新可能性的关键，并且研发投资是高通的首要任务。

现代飞机的维修任务复杂而繁琐，而使用AR头显叠加3D信息可视化可以大大优化飞机机械师的维修工作。增强现实系统如微软HoloLens 2可以通过手势、声音和注视控制来操作指令、显示器和技术工具等虚拟元素。德国弗劳恩霍夫通信、信息处理和人机工程学研究所的研究人员开发了用于维护空客A400M的概念和解决方案。传统的印刷版操作手册在限制了操作空间和清晰度的情况下已经不够便捷。AR设备可以直接在视场中显示虚拟的3D指南，从而解决了操作手册的问题。研究人员测试了微软HoloLens 2和爱普生Moverio BT-300等AR设备的适用性，并评估了其可用性、用户体验和舒适度等问题。团队采用多模态输入技术设计了交互元素，比如通过注视和手势来控制AR设备。被试者认为注视控制非常直观，大多数测试者喜欢这种方式。AR设备的使用有助于识别特定组件，并提供了有用的动画说明装配任务。未来，记录和数字化工作状态的文件和远程协作也将成为维修任务中的新选项。此外，AR设备的应用不仅限于飞机维修，其他行业也可以从中受益。

据报道，据《华尔街日报》消息，腾讯与Meta的谈判取得了一定进展，但具体细节尚不清楚。此次合作将使Meta的Quest VR头显进入中国市场，腾讯可能成为其中国独家经销商。Meta首席执行官马克·扎克伯格一直对中国市场感兴趣，并表示为什么Meta不能在中国这样一个全球最大的市场销售产品。与此同时，腾讯也对合作存在一些忧虑，尤其是扎克伯格过去对中国的批评。该报道还提到了腾讯过去与任天堂的合作案例，据称这次与Meta的合作可能会参照这一模式。另外，由于潜在的版号问题，Meta的内容如何在中国持续引入也是一个问题。作为游戏开发商，腾讯拥有强大的内容生产能力，因此这次合作对于双方来说都具有重要意义。

根据媒体报道，苹果公司对Vision Pro头显的预期销量一直在下调。最初预计首年销量为300万台，但后来被降至100万台，再降至90万台。临近WWDC大会发布时，销售目标变为30万台。此外，市场分析人士认为高昂定价和产能限制可能是苹果不断下调销售目标的原因之一。据悉，苹果在2024年仅能生产不足40万台设备。同时，由于设计复杂性和生产困难，苹果也推迟了头显设备的发售时间到2024年初。据知情人士透露，目前只有立讯精密一家代工厂准备生产不足40万台设备，另外两家中国供应商也只被要求提供13万至15万台设备的零部件。此外，生产困难还影响了低价版头显设备的研发。报道还指出，Vision Pro的制造工艺极为复杂，测试时间长，苹果对供货商和代工厂的生产效率感到不满。此前有报道称，索尼拒绝了苹果要求扩大Micro-OLED面板产能的要求，这可能是因为索尼正在评估Vision Pro的销售情况并不愿冒险扩产。

韩国首尔大学和Meta的研究人员发布了一项名为"Quest EnvSim"的研究，旨在使用头显和控制器的组合以及算法技巧，提供一种基于消费者VR设备的全身运动追踪方案。他们通过物理模拟的Avatar和深度强化学习，学习控制策略来产生扭矩，以准确追踪用户的头显和控制器姿态。该研究还证明了在高度受限的环境中，结合物理模拟和环境观察的稀疏上半身输入可以产生真实的全身运动，无需使用任何人工力。研究人员通过展示坐在椅子、沙发、盒子上，以及踏过盒子、摇椅子和转动办公椅的动作示例来展示系统的能力。然而，由于摄像头视场覆盖问题和不同姿态的存在，该系统仍无法准确估计微妙的下半身姿态。研究人员认为这是稀疏传感器与场景交互的运动追踪的最高质量结果之一，并将继续优化解决方案。

据Valve公布的数据显示，2023年6月份Steam的硬件和软件调查中，VR头显用户占比较上月减少了0.14%，降至1.73%。其中，PICO 4的份额在连续6个月上涨后，在6月再度上涨，涨幅为0.51%，达到1.82%。值得一提的是，Steam统计数据中首次出现了大朋的DPVR E4头显。 在头显方面，本月跌幅最大的是Meta Quest 2，下降了2%，降至42.05%。而Valve的Index则实现了最大的涨幅，增加了0.55%，占比为18.38%。Windows Mixed Reality的份额增加了0.52%，达到5.48%。而HTC Vive Pro 2和Vive Cosmos则略微上升，分别增加了0.18%和0.05%。 另外，PICO 4在连续6个月上涨后，5月份下降了0.04%，但在6月再度上涨并创新高，涨幅为0.51%，达到1.82%。PICO Neo 3的份额增加了0.23%，达到0.72%。此外，值得一提的是，6月份的Steam调查中首次出现了大朋头显DPVR E4，占比为0.03%。 总体来看，Meta仍然是品牌份额最高的，但受Quest 2影响，6月份整体份额下降至61.18%，环比减少了2.15%。Valve（18.38%）、HTC（9.82%）、WMR（5.48%）和PICO（2.56%）紧随其后。

彭博社的马克·古尔曼在《Power On》中指出，苹果在Vision Pro的早期开发阶段测试了支持HTC等第三方的VR控制器和指戴式输入设备，但最终放弃了这些方案，将重点放在眼+手控制方式上，并搭配Siri命令。古尔曼表示，Vision Pro将支持PlayStation 5和Xbox的游戏控制器。苹果在Vision Pro中没有提供VR控制器，而是采用眼+手的操作方式。古尔曼指出，苹果实际上考虑支持VR控制器，并测试了HTC等第三方的支持。此外，苹果也测试了指代式输入设备，并希望通过“包含传感器和触觉反馈的指戴式设备”来作为交互工具。苹果开发团队放弃了第三方VR控制器和指戴式设备，专注于眼+手控制方式，并搭配Siri命令。但Vision Pro将支持PlayStation 5和Xbox的游戏控制器，并支持蓝牙外接键盘，方便办公等用途。