2024年将是充满挑战的一年，创业者在复杂环境中努力探索、创新，以应对困境。金陀螺奖由陀螺科技创立，是泛TMT领域的重要奖项，旨在表彰勇于创新的从业者。奖项设有游戏、电竞和XR类，覆盖30多个细分奖项，并由行业专家评审，确保评选的权威性和专业性。第九届金陀螺奖的报名通道已于即日起开启，旨在为优秀前行者加冕，见证更多荣耀时刻。

加州大学圣地亚哥分校的外科医生正在测试 Apple Vision Pro 在微创手术中的应用，Horgan医生认为其可能比现有的手术机器人更加革命性。尽管成本高昂，Vision Pro在医疗领域仍被视为负担得起的设备，将CT扫描和生命体征监测等信息整合在一起，从而简化了医生的观察过程，减少了操作时的不适。Horgan对Vision Pro的显示效果表示满意，并提出医院可能会继续测试其在3D放射成像等其他医疗应用中的潜力。

苹果近期发布了其首部沉浸式影片《SUBMERGED》，采用Apple Immersive Video格式，邀请奥斯卡导演Edward Berger制作。该影片以二战潜艇为背景，时长17分钟，旨在展示极致的沉浸体验。影片制作中使用了23吨重的潜艇原型，结合高规格8K拍摄和空间音频技术，增强观影的真实感。苹果还推出了新型3D相机，并计划推出适用于Apple Immersive Video的创作工具。虽然当前沉浸式内容尚处于起步阶段，但苹果的策略引人期待。

Meta自2022年以来通过Horizon Worlds提供Connect大会的直播。今年，他们将Horizon与Unity和Blender等工具的集成推向极限，并改进了现场立体3D视频广播。Connect大会的世界设计成一个浮动的岛屿，有一个带屏幕的中央区、游乐区和技术休息室。社交游戏活动包括分享照片、收集硬币和寻找有共同兴趣的人。参加虚拟会议的人们可以定制徽章并激发与他人的对话。主题演讲本身围绕着一个带屏幕的中央区，设计了不同的音频区域。展示了Meta Quest 3S和Ray-Ban Meta眼镜。Connect大会还提供了通过移动设备和网络与Worlds交互的功能。为了获得更大的受众群体，团队使用了最新的性能指标工具来评估世界的性能。通过Quest进入World的人可以获得实时的立体3D直线型视频串流。摄像机硬件和视频制作工作流程方面有重大改进。今年的Connect大会希望能够激励Horizon World的创作者社区继续测试他们的工具和实现独特愿景。

高通在虚拟现实等新视频模式的兴起中提出了一种低延迟神经立体视频压缩方法，称为LLSS。与传统方法不同，LLSS引入了双向特征移位模块，通过视图之间的相互信息和交叉视角先验模型进行编码，旨在实现快速高效的低延迟立体视频串流。该方法减少了延迟，并且相比于现有的神经和传统编解码器，性能得到了显著提高。 现有的立体视频编码方法采用了分别编码左右视图的单视图编解码器，而LLSS通过并行处理左右视图有效降低了延迟，同时利用视差补偿减少了视图之间的冗余。LLSS编解码器的开发采用了双向移位模块，促进了视图之间的连接和信息交换，实现了低延迟推理。研究表明，与最先进的方法相比，LLSS在立体视频基准上大幅提高了R-D性能。 总的来说，LLSS是一种低延迟的神经立体视频压缩方法，可以同时压缩左右视图，通过双向移位模块和并行自编码器来降低比特率和提高帧质量。

智能眼镜被认为是增强现实的关键媒介，它提供了一个带集成麦克风和非耳塞扬声器的免手操作平台，可以将虚拟声源无缝地混合到现实世界的声学场景中。然而，要在增强现实中实现令人信服的虚拟声源，需要与真实声学相匹配的室内声学渲染，而有关用户声学环境的信息通常不可用。 为了解决这个问题，Meta和瑞典查尔姆斯理工大学的研究人员提出了一种基于智能眼镜的双耳房间脉冲响应盲识方法。他们使用智能眼镜中的麦克风阵列从现实环境中的几秒钟语音中盲识双耳房间脉冲响应，并通过去噪和波束形成来产生一个伪参考信号，用于估计房间脉冲响应。 该方法能够准确地估计房间声学参数，比基线算法在估计混响时间和直接-混响能量比方面更优。听力实验的结果进一步表明，与几何形状相似的房间相比，该方法能更令人信服地再现真实房间的声学效果。 该研究的方法为增强现实应用中的声学匹配问题提供了解决方案，并能够在智能眼镜中实现准确的双耳声学渲染。

谷歌、加拿大西蒙菲莎大学和香港科技大学的研究人员提出了一种全新的3D神经隐式头部化身模型，通过引入局部哈希表混合形状、轻量级MLP和分层最近邻搜索方法，实现了高效的实时渲染和细粒度面部表情。研究团队在每个3DMM网格顶点附加了哈希表混合形状，使用卷积神经网络从头像驱动信号预测顶点权重，并建立相关的哈希表嵌入来捕获面部表情。此外，他们还设计了一个分层查询解决方案来加速k近邻搜索。实验结果表明，这种方法能够实现实时渲染，并获得与最先进的渲染质量相当的效果，尤其在具有挑战性的面部表情方面表现出优势。这项研究对于构建高质量、高效的虚拟化身具有重要意义，并可应用于虚拟现实、远程会议等实时应用领域。

重定向方法被广泛应用于扩展交互空间和创造引人入胜的虚拟现实体验。然而，以往的研究主要关注用户是否能感知到目标感，很少研究用户对重定向的感知准确性和敏感性。此外，手重定向交互的感知和表现如何受到多感官反馈的影响尚不清楚。 为了解决这些问题，韩国科学技术院的研究团队使用心理物理学方法来指定用户对手重定向的感知准确性和敏感性，并提供可接受的重定向参数范围。研究结果表明，提供连续的多感官反馈和距离成比例的虚拟手与目标之间的距离可以提高用户对手重定向的感知准确性，并显著提高任务性能的精度。 此外，研究还发现多感官反馈对用户感知特征和重定向参数有影响。基于这些结果，团队得出结论，了解多感官反馈对人类在虚拟现实中的感知和表现的影响是设计更有效的手重定向方法的关键。 实验结果和分析发表在论文《多感官反馈对虚拟现实中手-重定向交互感知和表现的影响》中。

《Augmented Empire》是一款回合制战术RPG游戏，在赛博朋克城市新萨凡纳的背景下展开。玩家将领导一支由罪犯组成的团队，挑战各种敌人。游戏可以在Oculus Go和三星Gear VR等平台上进行，现在开发团队正准备将其带到Quest平台上。Quest版本将进行视觉升级，使用动态照明和PBR，并根据不同设备使用不同的纹理。此外，新的混合现实支持允许玩家调整战盘大小，并支持手部追踪和控制器。游戏承诺提供10小时的游戏时间，包括26个任务，6个可玩角色和60个环境。还有改进的战斗小游戏和成就。《Augmented Empire》将于11月21日在Meta Quest Store上线。

保加利亚国防部表示，保加利亚空军学院已经接收了用于培训F-16 Block 70战斗机驾驶员的首个虚拟现实系统。这是保加利亚与战斗机制造商洛克希德马丁的合作项目的一部分。根据该项目，保加利亚空军计划在2025年开始交付首批F-16战斗机，洛克希德马丁将为保加利亚提供技术援助和资金支持。为了培训航空人员，Georgi Benkovski保加利亚空军学院将部署虚拟现实系统和驾驶模拟器，受训人员可以通过这些系统在身临其境的环境中熟悉相关操作。保加利亚国防部表示，空军学院成为欧洲唯一有机会培训F-16 Block 70战斗机的学校，并成为使用虚拟现实技术培训航空专家的先驱之一。