Insider Insider

数据报告2023年11月VR/AR行业月报 | VR陀螺

11月,XR市场面临挑战,短期内字节跳动调整PICO组织结构,减少投入与团队规模。科技巨头则积极战略合作,例如三星与LG研发新XR设备,腾讯与Meta达成销售合作。芬兰Varjo推出XR-4系列头显,具备高分辨率和透视混合现实功能。融资并购热度攀升,总金额达41.55亿元,主要集中在硬件领域,国内外融资阶段多为早期。政策方面,11月国内出台25条支持XR产业发展的相关政策,其中浙江省数量最多。
数据报告2023年11月VR/AR行业月报 | VR陀螺

VR社交Quest Pro新增舌头追踪功能

Meta近期发布了第60版SDK,新增的OpenXR扩展正式支持用户舌头伸出长度的检测。虽然Meta Avatars SDK尚未更新此功能,开发者已通过第三方平台体验到该特性。ALVR开发者Korejan基于该SDK在VR社交平台《VRChat》展示了这一功能。舌头检测将提升Avatar的真实感,但由于只有Quest Pro支持面部追踪且销量不佳,推广速度可能受限。目前,Quest Store中鲜有支持面部追踪的应用,普遍仅限于眼动追踪。
VR社交Quest Pro新增舌头追踪功能

《阿斯加德之怒2》实际体验:Quest游戏的新标杆

《阿斯嘉德之怒2》是Sanzaru Games开发的一款角色扮演游戏,继承了前作的高品质和深度。该游戏在Quest平台上展现出接近PC虚拟现实游戏的视觉效果,呈现出绚丽多彩的世界和丰富的细节。游戏的剧情设定在由众神居住的广阔领域,玩家需要与神灵和怪物战斗,解决神级难题。游戏提供了超过100个小时的探险和战斗,包括地牢探险、环境谜题和隐藏区域。地图广阔,让玩家有一种开放世界游戏的体验。在战斗方面,该续作相对于前作更易上手,但仍保留了足够的深度和挑战性。游戏中还有大型头目战,让玩家体验真实的遭遇,增加了游戏的史诗感。总体而言,《阿斯嘉德之怒2》对Quest平台来说是一款重要的里程碑,展示了Quest平台可以实现高质量的游戏。

Meta正式推出MR Utility Kit,帮助你快速构建空间感知型MR应用

Meta在Connect大会发布了MR Utility Kit,这是一个实用工具套件,可用于Unity和Unreal引擎。该套件提供了各种功能,如Passthrough Rellighting,可以帮助加快开发并增强应用程序的真实感。MRUK是一个引擎级的实用工具集合,可以帮助开发者更快地构建空间感知应用程序,并减少编写样板代码的数量。Meta表示他们将使用MRUK来加速MR API的开发,并计划将其扩展到其他MR API。MRUK包含了各种功能和工具,例如场景查询、图形助手和其他开发工具,可以改进应用程序的构建过程。其中一个令人兴奋的新功能是PTRL,它可以简化添加阴影和高光的过程。为了构建沉浸式混合现实体验,将虚拟对象的阴影和高光投射到现实世界表面非常重要。Meta为开发者提供了可重用的组件、示例、文档和设计指南,以简化调整现实世界照明以匹配虚拟世界元素的过程。Meta表示,这些可重用组件将帮助开发者节省时间和资源,并提供全面的技术文档和设计指南来支持高质量用户体验的开发。他们还承诺将继续提供各种工具,以加速开发使用混合现实技术的过程。
Meta正式推出MR Utility Kit,帮助你快速构建空间感知型MR应用

Valve专利介绍基于成像的角度敏感检测器的光学眼动追踪方法

眼动追踪是一种非侵入性检测眼睛位置、方向和运动的方法,可以使用光学探测器或传感器来追踪眼睛。V社的专利申请介绍了一种使用成像的角度敏感探测器的光学眼动追踪方法。每个眼动追踪组件包括光探测器和光源,可以定位于头显设备的不同位置,用于确定用户注视方向。光学探测器包括象限光电探测器和成像透镜,可以通过电表征来确定眼睛位置信息。此外,通过使用多个眼动追踪组件,可以更准确地确定用户的凝视位置。专利中还介绍了使用机器学习技术支持眼动追踪的示例。这项名为“Optical tracking including imaging-based angle sensitive detectors”的专利申请最初于2023年5月提交,并由美国专利商标局公布。需要注意的是,专利申请公布并不意味着专利获批,且专利申请后还需要进行实际审查。
Valve专利介绍基于成像的角度敏感检测器的光学眼动追踪方法

Meta日前发布Avatars SDK v24

Meta最近发布了Avatars SDK v24,引入了新的技术基础,并提供了视觉增强、扩展自定义支持、性能改进和Unity Asset Store支持。在v24中,Meta重新审视了支持Avatar SDK的核心系统,这将使Meta能够在不给应用程序带来重大破坏风险的情况下提供未来的改进。Meta已经重建了核心系统,围绕rig abstraction而不是具体的rig,这将使团队能够更快地改善Avatar的视觉效果而不会破坏应用程序。引入这项新技术后,Meta将放弃对legacy character rig的支持,并将在2024年公布更多关于弃用时间表的信息。除了引入一个全新的character rig,v24还提供了一系列改进,包括视觉增强、扩展自定义支持和性能改进等。此外,SDK v24是通过Unity Asset Store下载Meta Avatars SDK的第一个版本,这将为现有开发者更新到未来版本的SDK提供便利,并为新开发者首次将Meta Avatar SDK集成到应用程序中提供便利。
Meta日前发布Avatars SDK v24

剑桥大学AR/VR研究员探索用基于手势的3D内容创作替代传统菜单系统

英国研究人员设计了一个名为HotGestures的新系统,允许用户通过快速手势在虚拟环境中进行创建和设计操作。该系统通过头显的手部追踪器持续接收用户手指和双手的运动,并使用人工智能评估手部运动,预测用户想要的工具。研究结果显示,对于大多数操作,手势模式比菜单选择模式更快,特别是对于笔、立方体、球体和复制操作。然而,调查结果还显示,参与者认为使用手势的方法更快但更费力,而且比菜单选择更不准确,可能是因为参与者不熟悉使用手势进行3D建模。在实验中,有14人更喜欢使用混合解决方案,而只有两名参与者更喜欢只使用HotGestures。研究人员免费提供了HotGestures的源代码和数据,希望这可以成为在虚拟现实和增强现实中使用虚拟工具的一种标准方式。
剑桥大学AR/VR研究员探索用基于手势的3D内容创作替代传统菜单系统

微软宣布Azure Remote Rendering增加点云流式传输功能

微软宣布为Azure Remote Rendering引入了Point Cloud Streaming功能。Azure Remote Rendering是微软的一项服务,允许开发者实时渲染高质量的交互式3D内容,并将其流式传输到HoloLens 2和Meta Quest等设备。新增的Point Cloud Streaming功能将大大提高点云渲染能力和用户体验。以前,用户必须等待整个模型从远程存储下载后才能渲染,而现在可以几乎即时可视化高达125亿个点的点云文件。点云文件的流式传输将成为默认行为。微软与Roboverse Reply和Augment IT等合作伙伴进行了密切合作开发和测试。据合作伙伴表示,Point Cloud Streaming为可视化和实时交互带来了全新的可能性,并为各种设备的数字孪生场景提供了庞大的数据集。微软表示期待看到开发者如何利用这个新功能。
微软宣布Azure Remote Rendering增加点云流式传输功能

知名Mod开发者LukeRoss在为《孤岛惊魂5》制作VR Mod

名为LukeRoss的VR Mod制作人表示,他正在制作《孤岛惊魂5》的VR Mod,并将很快与大家见面。LukeRoss以为《赛博朋克2077》、《艾尔登法环》和《侠盗猎车手5》等游戏制作高质量的VR Mod而闻名于VR社区。他的作品使粉丝能够以身临其境的第一人称视角感受游戏的世界。此前,LukeRoss的VR Mod受到社区的欢迎,并帮助他赚取了高额收入,月赚2万美元。然而,R星母公司Take-Two Interactive发出了版权保护传票,要求他下架为《侠盗猎车手5》、《荒野大镖客2》和“黑手党123”制作的VR Mod。目前,LukeRoss开始专注于制作育碧的《孤岛惊魂》系列的VR Mod。《孤岛惊魂5》的故事发生在美国蒙大拿州的希望郡,玩家将扮演郡警与抵抗势力一同对抗邪教组织“伊甸之门”,并帮助希望郡的人民和教团战斗以夺回希望郡。对于VR Mod,玩家将能够以沉浸式视角体验游戏的故事,并完成一系列挑战。感兴趣的玩家可以通过Patreon页面支持并获取《孤岛惊魂5》的VR Mod。
知名Mod开发者LukeRoss在为《孤岛惊魂5》制作VR Mod

Meta发布支持检测舌头伸出的面部追踪OpenXR插件

Meta在最新的v60 SDK中发布了一个包含检测舌头伸出的新版本面部追踪OpenXR扩展。尽管Meta Avatars SDK尚未纳入这个功能,但第三方的Avatar解决方案已经可以通过OpenXR扩展来支持舌头伸出检测。来自用户“コレヂャン”的演示通过全新的VRCFT模块展示了这个功能。Meta一直在积极优化眼动追踪和面部追踪,并在2022年11月发布了多个演示应用,展示眼动追踪和面部追踪的性能效果。尽管相关演示展示了相当出色的面部和眼部动作,但系统一直无法支持舌头动作。然而,随着v60 SDK的发布,Avatar将能够实现吐舌头等动作。虽然Meta Avatars SDK尚未支持这个功能,但第三方的Avatar解决方案已经可以通过OpenXR扩展来支持舌头伸出检测。例如,开发者korejan为ALXR纳入了Meta提供的舌头伸出检测功能。新版本的VRCFT可以通过名为VDX的应用程序支持Air Link和Virtual Desktop。
Meta发布支持检测舌头伸出的面部追踪OpenXR插件