2024年12月17日至19日，南昌举行了中国虚拟现实产业创新大会，吸引了来自10多个国家的500多家企业及100多所高校参与。大会围绕“智赋未来 创新发展”主题，进行了20多场论坛和多项新品发布。各方讨论了XR行业的技术瓶颈与应用场景，突出AI与XR的融合前景。江西省政府积极推动VR产业发展，发布“1269”行动计划支持政策，吸引更多投资与人才。本次大会展示了医疗、工业等领域的XR应用，旨在促进产业升级与国际合作。

梁溪文旅集团与宸境科技联合推出全国首个虚幻引擎制作的水上LBE项目《天枢•古运河的心跳》，计划于2025年元旦正式运营。该项目结合VR技术与游船体验，游客可通过佩戴VR眼镜与自然手势互动，在虚拟世界与现实环境中探索。项目展示无锡独特文化，融入当地地标与音乐，打造沉浸式冒险。三大亮点包括流畅的画质、动态游船的交互体验和文化元素的深度结合，提供独特的文旅消费新场景。

微软通过惯性追踪和光流运动来对图像传感器的运动进行补偿。惯性追踪数据可用于旋转运动补偿，光流技术可用于平移运动补偿。通过组合多个图像帧和运用仿射变换补偿和光流补偿，可以生成解锁的图像，用于虚拟和增强现实体验。专利申请中描述了具体的实施方式和流程。该技术适用于头戴式显示器等设备，能够减少图像模糊和伪影，提供更好的用户体验。这项专利申请于2023年9月提交，并于2024年12月26日公布。

近日，台湾交通大学研究人员提出了一种新的360度深度估计方法，以有效利用未标记的360度数据。他们使用最先进的视角深度估计模型作为teacher模型，并通过六面立方体投影技术生成伪标签，从而标记360度图像的深度。这种方法通过利用大量未标记数据集的可用性，显示出了深度估计精度的显著提高，尤其是在zero-shot场景中。该方法包括离线掩码生成和在线半监督联合训练机制两个关键阶段，通过联合训练标记和伪标记数据，增强了360度单目深度估计器的性能，并展示了有效的知识转移。研究人员还证明了该方法在Matterport3D和Stanford2D3D等基准数据集上的有效性。通过使用不同的SOTA 360度深度模型和各种未标记数据集展示了训练技术的多功能性和有效性。总体而言，这项研究为360度图像的准确深度估计开辟了新的可能性。

巴塞罗那大学的研究人员提出了一种增强的MVS框架，通过集成多视图360度图像、运动结构和先进的图像处理技术来改进传统的MVS方法。该方法在重建质量、计算效率和鲁棒性方面都取得了显著优势。研究结果表明，该框架相对于现有的神经隐式场方法具有更高的精度和精度，能够有效处理复杂的场景、遮挡和不同视点。该框架通过GPU加速和改进的图像处理和网格重建算法，显著缩短了计算时间和内存消耗。然而，该方法也存在一些局限性，例如需要大量的图像进行完美的重建，对高频区域如反射等存在挑战，并在不同的照明条件下可能表现不佳。总的来说，该研究证明了增强的MVS框架在实时和大规模应用中的实用性，并适用于增强现实和虚拟现实等领域。未来的工作将进一步改进MVS过程、探索更有效的图像处理算法，并应用于更具挑战性的环境。

手势识别（HGR）在现实场景中的实时应用存在着硬件和计算需求的限制。为了解决这些限制，开罗美国大学提出了一种基于骨架的动态HGR框架。该框架将动态手势识别简化为静态图像分类任务，通过数据级融合技术将动态手势的3D骨骼数据编码为静态RGB时空图像。框架利用一个专门的端到端集成调谐器（e2eET）Multi-Stream CNN架构，优化数据表示之间的语义连接，并最大程度地减少计算需求。测试结果表明，该框架在5个基准数据集上显示出与最先进技术相媲美的性能。研究人员强调该框架在虚拟现实/增强现实和环境智能等领域增强实时应用的潜力，为动态手势识别提供了可扩展和高效的解决方案。该框架成功地将动态手势识别任务转换为静态图像分类任务，具有稳健的、轻量级的、实时的特点。研究人员表示进一步的努力应该集中在通过定制的机器学习/深度学习优化方法来提高计算效率，从而提高框架的性能和有效性。

XR技术具有巨大的生产力潜力，因此有必要改进XR的文本输入解决方案。谷歌、伯明翰大学、哥本哈根大学、亚利桑那州立大学和西北大学的研究人员调查了XR文本输入技术的现状，并重点关注键盘作为基本工具的重要性。他们讨论了XR带来的独特挑战和机遇，并综合了现有解决方案的主要趋势。现有的解决方案要么效率低下，要么精度有限，要么需要繁琐的物理设置。在XR中缺乏适当的文本输入方法将阻碍生产力工具、沉浸式虚拟世界体验和潜在的超级生产力应用程序的开发。XR环境的独特挑战需要量身定制的方法，如高分辨率显示器和准确的手指跟踪可能会阻碍传统的输入法。现有的文本输入性能比PC差，无论是物理键盘还是虚拟键盘。谷歌研究人员提到了一些新颖的人体工程学光线投射技术和表面锚定的虚拟键盘作为解决方案。机器学习解码模型也可以提高文本输入的准确性和速度。

PICO近日在PICO互联上开始了手势追踪的公测，旨在评估和优化裸手操作体验。PICO互联是一套工具软件，允许用户在一体机内跨平台使用PC，畅玩Steam VR游戏和观看影音视频。如之前预告的那样，PICO互联将纳入串流手势追踪的功能，并且现在团队已经开放了公测入口。公测版本具有特定的功能和注意事项。有兴趣的用户可以通过提供的二维码报名参与公测。另外，用户还可以下载飞书并通过链接加入群聊。

UNIVRS开发商发布了《进击的巨人VR: 不倒翁》的完整版，该游戏在Quest上推出了早期访问版本。完整版包括四个章节，玩家可以体验第三和第四章节以及结局，还可以与铠甲巨人BOSS进行战斗。此外，首次引入了合作模式，让玩家一起体验所有章节。 此前的试玩版本在内容上比较有限，只有一个章节和一些解锁的刀片，给人一种技术演示的感觉。虽然游戏在初次试玩时被认为比较粗糙，但是在Horizon商店上获得了稳定的4.5/5用户评分。开发商还宣布，他们计划在2025年进行免费更新，称之为“雷霆之矛解锁事件”，并将在全球范围内进行挑战。 早期访问版本购买者可以免费下载第二部分，而首次尝试的玩家可以单独购买第一部分（售价8美元），或者购买第一部分和第二部分的组合套装（售价20美元）。游戏支持Quest 2、Quest 3/S和Quest Pro设备。

VR游戏《刀剑与巫术》开发者Warpfrog计划在6月发布1.0版本后结束游戏的开发，并已开始着手下一款高度可修改的VR游戏。目前对该游戏的详细信息尚不清楚，但Warpfrog表示该游戏将保留他们以前游戏的特点，例如基于物理的交互和模拟的重要性。此外，该工作室确认该游戏将和《刀剑与巫术》一样具有高度的可修改性。《刀剑与巫术》可以通过Nexus Mod Manager进行简单的手动修改，而新游戏也将继承此特点。工作室表示，他们在新游戏中引入了全新、更快速的框架，并且第一次以完整团队从头到尾开发游戏。近期发布的《刀剑与巫术》1.0版本增加了“水晶狩猎”故事模式，使游戏不仅仅是一款近战战斗的沙盒游戏，还成为了一个拥有升级系统、叙事和更大互动性的冒险游戏。Warpfrog表示通过五年的经验积累，他们迫不及待展示他们下一款游戏的成果，并且感谢玩家的支持使他们有能力开发更好的游戏。