台湾交通大学提出新的360°图像深度估计框架,有效利用未标记360°数据

近日,台湾交通大学研究人员提出了一种新的360度深度估计方法,以有效利用未标记的360度数据。他们使用最先进的视角深度估计模型作为teacher模型,并通过六面立方体投影技术生成伪标签,从而标记360度图像的深度。这种方法通过利用大量未标记数据集的可用性,显示出了深度估计精度的显著提高,尤其是在zero-shot场景中。该方法包括离线掩码生成和在线半监督联合训练机制两个关键阶段,通过联合训练标记和伪标记数据,增强了360度单目深度估计器的性能,并展示了有效的知识转移。研究人员还证明了该方法在Matterport3D和Stanford2D3D等基准数据集上的有效性。通过使用不同的SOTA 360度深度模型和各种未标记数据集展示了训练技术的多功能性和有效性。总体而言,这项研究为360度图像的准确深度估计开辟了新的可能性。
台湾交通大学提出新的360°图像深度估计框架,有效利用未标记360°数据

巴塞罗那大学提出增强MVS框架,改善三维重建细节和清晰度

巴塞罗那大学的研究人员提出了一种增强的MVS框架,通过集成多视图360度图像、运动结构和先进的图像处理技术来改进传统的MVS方法。该方法在重建质量、计算效率和鲁棒性方面都取得了显著优势。研究结果表明,该框架相对于现有的神经隐式场方法具有更高的精度和精度,能够有效处理复杂的场景、遮挡和不同视点。该框架通过GPU加速和改进的图像处理和网格重建算法,显著缩短了计算时间和内存消耗。然而,该方法也存在一些局限性,例如需要大量的图像进行完美的重建,对高频区域如反射等存在挑战,并在不同的照明条件下可能表现不佳。总的来说,该研究证明了增强的MVS框架在实时和大规模应用中的实用性,并适用于增强现实和虚拟现实等领域。未来的工作将进一步改进MVS过程、探索更有效的图像处理算法,并应用于更具挑战性的环境。
巴塞罗那大学提出增强MVS框架,改善三维重建细节和清晰度

开罗美国大学提出基于骨架的动态手势识别框架

手势识别(HGR)在现实场景中的实时应用存在着硬件和计算需求的限制。为了解决这些限制,开罗美国大学提出了一种基于骨架的动态HGR框架。该框架将动态手势识别简化为静态图像分类任务,通过数据级融合技术将动态手势的3D骨骼数据编码为静态RGB时空图像。框架利用一个专门的端到端集成调谐器(e2eET)Multi-Stream CNN架构,优化数据表示之间的语义连接,并最大程度地减少计算需求。测试结果表明,该框架在5个基准数据集上显示出与最先进技术相媲美的性能。研究人员强调该框架在虚拟现实/增强现实和环境智能等领域增强实时应用的潜力,为动态手势识别提供了可扩展和高效的解决方案。该框架成功地将动态手势识别任务转换为静态图像分类任务,具有稳健的、轻量级的、实时的特点。研究人员表示进一步的努力应该集中在通过定制的机器学习/深度学习优化方法来提高计算效率,从而提高框架的性能和有效性。
开罗美国大学提出基于骨架的动态手势识别框架

谷歌等研究员展示XR文本输入的主要趋势和挑战

XR技术具有巨大的生产力潜力,因此有必要改进XR的文本输入解决方案。谷歌、伯明翰大学、哥本哈根大学、亚利桑那州立大学和西北大学的研究人员调查了XR文本输入技术的现状,并重点关注键盘作为基本工具的重要性。他们讨论了XR带来的独特挑战和机遇,并综合了现有解决方案的主要趋势。现有的解决方案要么效率低下,要么精度有限,要么需要繁琐的物理设置。在XR中缺乏适当的文本输入方法将阻碍生产力工具、沉浸式虚拟世界体验和潜在的超级生产力应用程序的开发。XR环境的独特挑战需要量身定制的方法,如高分辨率显示器和准确的手指跟踪可能会阻碍传统的输入法。现有的文本输入性能比PC差,无论是物理键盘还是虚拟键盘。谷歌研究人员提到了一些新颖的人体工程学光线投射技术和表面锚定的虚拟键盘作为解决方案。机器学习解码模型也可以提高文本输入的准确性和速度。
谷歌等研究员展示XR文本输入的主要趋势和挑战

PICO正式开启PICO互联的手势追踪公测

PICO近日在PICO互联上开始了手势追踪的公测,旨在评估和优化裸手操作体验。PICO互联是一套工具软件,允许用户在一体机内跨平台使用PC,畅玩Steam VR游戏和观看影音视频。如之前预告的那样,PICO互联将纳入串流手势追踪的功能,并且现在团队已经开放了公测入口。公测版本具有特定的功能和注意事项。有兴趣的用户可以通过提供的二维码报名参与公测。另外,用户还可以下载飞书并通过链接加入群聊。
PICO正式开启PICO互联的手势追踪公测

《进击的巨人VR》推出「完整版」,包括新的章节和合作模式。

UNIVRS开发商发布了《进击的巨人VR: 不倒翁》的完整版,该游戏在Quest上推出了早期访问版本。完整版包括四个章节,玩家可以体验第三和第四章节以及结局,还可以与铠甲巨人BOSS进行战斗。此外,首次引入了合作模式,让玩家一起体验所有章节。 此前的试玩版本在内容上比较有限,只有一个章节和一些解锁的刀片,给人一种技术演示的感觉。虽然游戏在初次试玩时被认为比较粗糙,但是在Horizon商店上获得了稳定的4.5/5用户评分。开发商还宣布,他们计划在2025年进行免费更新,称之为“雷霆之矛解锁事件”,并将在全球范围内进行挑战。 早期访问版本购买者可以免费下载第二部分,而首次尝试的玩家可以单独购买第一部分(售价8美元),或者购买第一部分和第二部分的组合套装(售价20美元)。游戏支持Quest 2、Quest 3/S和Quest Pro设备。

《剑刃与魔法》工作室确认正在开发下一款“高度可修改”的VR游戏

VR游戏《刀剑与巫术》开发者Warpfrog计划在6月发布1.0版本后结束游戏的开发,并已开始着手下一款高度可修改的VR游戏。目前对该游戏的详细信息尚不清楚,但Warpfrog表示该游戏将保留他们以前游戏的特点,例如基于物理的交互和模拟的重要性。此外,该工作室确认该游戏将和《刀剑与巫术》一样具有高度的可修改性。《刀剑与巫术》可以通过Nexus Mod Manager进行简单的手动修改,而新游戏也将继承此特点。工作室表示,他们在新游戏中引入了全新、更快速的框架,并且第一次以完整团队从头到尾开发游戏。近期发布的《刀剑与巫术》1.0版本增加了“水晶狩猎”故事模式,使游戏不仅仅是一款近战战斗的沙盒游戏,还成为了一个拥有升级系统、叙事和更大互动性的冒险游戏。Warpfrog表示通过五年的经验积累,他们迫不及待展示他们下一款游戏的成果,并且感谢玩家的支持使他们有能力开发更好的游戏。

游戏影核《驼崽派对/Alpaca Party》正式登陆Meta Quest

12月24日,影核发行的派对狼人杀游戏《Alpaca Party》在Meta Quest平台免费上架。《Alpaca Party》为《驼崽派对》的海外版,后者在国内PICO平台快速获得热爱,并赢得金陀螺奖“年度人气VR游戏奖”。经过半年的优化,该游戏新增了多张地图和数十件饰品,重构了商店和内购系统,增强了玩家的VR交互体验。《Alpaca Party》能否延续其在PICO平台的成功,令人期待。
游戏影核《驼崽派对/Alpaca Party》正式登陆Meta Quest

游戏受NS健身环启发,VR健身类游戏《Fitness Fables》2025年初发售

由波兰工作室Immersion Games开发的健身类VR游戏《Fitness Fables》定于2025年1月登陆Quest平台。该游戏受Nintendo Switch的《健身环大冒险》启发,玩家化身守护者,通过体育锻炼获得能量以对抗敌人,恢复Alterterra王国的平衡。游戏包含80个关卡、16场BOSS战和16个额外挑战,运动强度可根据玩家水平定制,涉及24种锻炼动作,旨在提升力量、耐力和协调性。
游戏受NS健身环启发,VR健身类游戏《Fitness Fables》2025年初发售

先极致再轻量:小派科技发布全球最轻薄8K VR全功能头显Dream Air

小派科技最新推出的VR头显Dream Air被称为“全球最轻、最薄、最小的8K全功能VR”,重量不到200g。它具备inside-out定位和内置眼动追踪技术,采用Micro-OLED显示方案,能够完整保留高端VR设备的全部功能。该产品还集成了高品质立体声扬声器和麦克风,免去了佩戴耳机的不便。除此之外,Dream Air还提供了磁吸式处方镜片解决方案和智能自动调节头带设计,为用户提供清晰的视觉体验和极致的舒适度。设计上,Dream Air采用了现代简约的外观设计,展现出更强的时尚感和亲和力。该产品将为用户带来真实可感的价值体验,并被认为将开启VR设备的全场景应用时代。Dream Air预计于2025年5月底开始发货,售价为9699元。
先极致再轻量:小派科技发布全球最轻薄8K VR全功能头显Dream Air