Nweon

nweon 文章

XR日报:扎克伯格再吐槽 Vision Pro,苹果专利分享裸手交互技术

扎克伯格在接受采访时批评了苹果的Apple Vision Pro,认为其整体体验不值3499美元的价格。他认为Meta的设备能以更低的价格提供更好的体验。苹果的专利申请介绍了一种与裸手交互相关的技术,可以捕捉用户的手势并与虚拟环境进行交互。Plessey和Meta宣布成功开发出世界最亮的红色Micro LED显示器,专为AR眼镜设计。Meta的专利申请介绍了为音乐游戏开发的“玩家追踪游戏编辑器”技术,可以实时预览和修改3D虚拟游戏空间。中国科学院和百度团队提出的HERO-SLAM是一种混合增强鲁棒优化的方法,用于神经隐式SLAM研究。卡内基梅隆大学的研究团队通过创新项目推动XR技术的无障碍应用,以使残障人士能够参与虚拟世界的体验。德国研究人员开发了一种创新的多堆叠OLED架构,旨在提供在明亮环境中高对比度的AR图像。CaseCruzer发布了一个可为十台头显充电的便携充电站。华东理工大学等团队提出了一种创新的3D内容创建框架,解决了保持纹理细节与几何一致性的问题。Meta的第一方应用Scoreboards已下架,但成就功能仍可通过Meta Horizon智能手机应用查看。VR多人求生游戏《GRIM》将于1月16日发行。格拉斯哥大学开发了一个XR平台,可数字化展示文化遗产藏品。调查显示大多数人对使用XR技术探索文化遗产表现出浓厚兴趣。

调查:79%观众有兴趣用VR探索无法公开展览的宝藏藏品

格拉斯哥大学对全球2000多人进行的一项调查发现,79%的受访者表示有兴趣使用XR技术探索目前无法向公众开放的藏品。在英国国家科研与创新署的资助下,格拉斯哥大学正在开发一个XR平台,用于展示文化遗产收藏,让人们足不出户就能探寻珍贵的文物。研究团队还发现,96%受访者熟悉VR技术,55%受访者有以某种形式参与过VR技术。格拉斯哥大学的研究结果正在帮助博物馆规划未来如何利用数字化技术吸引公众参与,并表示这是全球范围内越来越受欢迎的趋势。研究人员认为,人们对沉浸式数字体验有着明显的兴趣,渴望以新的方式与文化遗产交互。据悉,格拉斯哥大学开发的XR平台预计将于2025年3月完成,届时人们即可通过该平台虚拟参观一系列展品。
调查:79%观众有兴趣用VR探索无法公开展览的宝藏藏品

调查:79%观众有兴趣用VR探索无法公开展览的宝藏藏品

格拉斯哥大学对全球2000多人进行的一项调查发现,79%的受访者表示有兴趣使用XR技术探索目前无法向公众开放的藏品。在英国国家科研与创新署的资助下,格拉斯哥大学正在开发一个XR平台,用于展示文化遗产收藏,让人们足不出户就能探寻珍贵的文物。研究团队还发现,96%受访者熟悉VR技术,55%受访者有以某种形式参与过VR技术。格拉斯哥大学的研究结果正在帮助博物馆规划未来如何利用数字化技术吸引公众参与,并表示这是全球范围内越来越受欢迎的趋势。研究人员认为,人们对沉浸式数字体验有着明显的兴趣,渴望以新的方式与文化遗产交互。据悉,格拉斯哥大学开发的XR平台预计将于2025年3月完成,届时人们即可通过该平台虚拟参观一系列展品。
调查:79%观众有兴趣用VR探索无法公开展览的宝藏藏品

麻省理工开发嵌入式机器可读标记:助力混合现实与大规模物联网应用

麻省理工学院的研究人员提出了一种新颖的方法,通过设计、制造和检测嵌入式机器可读标记来将物理对象与其虚拟对象连接起来。团队将提出的标记方法分为自然标记、结构标记和内部标记三种类别,利用计算机视觉、机器学习、计算成像和材质科学的方法组合,为目标识别、追踪和交互提供了强大而通用的解决方案。相关标记可以无缝地集成到现实世界的对象,传达了对象的身份、来源、功能和交互,并充当“无处不在的元数据”的网关。为了实现这一目的,研究人员提出了一种将3D打印结构内部的气隙与红外发射丝相结合的新方法,利用红外摄像头观察半透明物体时能够检测到空气间隙。研究人员还开发了一个用户界面,帮助用户将标记加载到编辑器中并将其嵌入到所需的位置。最后,通过自定义图像处理管道对标签进行检测和二值化处理,实现与3D对象的交互应用。此研究探索了嵌入式机器可读标记的挑战和机遇,包括与大规模制造的集成、隐私考虑、消费产品应用和增强现实个性化交互等。
麻省理工开发嵌入式机器可读标记:助力混合现实与大规模物联网应用

俄罗斯开发无人机与NeRF结合的快速3D人体重建系统

俄罗斯斯科尔科沃科学技术研究院提出了一个名为AirNeRF的系统,旨在通过神经辐射场(NeRF)和基于无人机的自动视频捕获方法,快速且准确地创建高质量的人体3D重建。该系统利用了rigged网格来实现动态人类自由视角合成,适用于虚拟现实中的沉浸式体验。与传统的摄影测量方法相比,该系统具有较高的重建质量和更短的安装时间,并且适用于不均匀表面和具有纹理变化、反射和透明物体的场景。该方法需要支持NeRF训练的GPU、无人机和至少2×2米的开放空间。AirNeRF的目标是实现个性化的数字Avatar,以增强虚拟现实环境中的交互。该系统利用无人机捕获视觉数据,并通过精确的定位技术提高三维Avatar重建的准确性。NeRFacto是在系统中使用的NeRF模型,具有快速处理时间和高质量重建结果的优点。最终生成的Avatar可用于现代3D引擎,并且具有逼真的外观和正确的比例,可用于增强VR/AR领域的用户体验。
俄罗斯开发无人机与NeRF结合的快速3D人体重建系统

Vision Pro第三方控制器Surreal Touch上手体验

初创公司Surreal Interactive开发了一款名为Surreal Touch的第三方控制器,用于支持用户在Apple Vision Pro上畅玩PC VR游戏。首批产品已经开始发货给Kickstarter的支持者,其中包括XR行业专家泽加米。与Meta的Touch Pro控制器类似,Surreal Touch使用机载摄像头进行追踪,并将其报告给头显。控制器将推出一个SDK,允许开发者构建直接支持控制器的应用程序,并且可在Windows上使用软件将PC VR内容串流到Apple Vision Pro。尽管控制器的软件体验令人印象深刻,但实际追踪质量存在一些问题,包括位置精度不够准确。虽然控制器的构建质量和手感被称赞,但也存在一些细节问题。控制器的追踪质量适合手速较慢的游戏,但对于需要快速动作的游戏可能会令玩家感到沮丧。Surreal Touch的价格为300美元,泽加米认为对于想要在Apple Vision Pro上畅玩PC VR游戏的用户来说是值得购买的产品。
Vision Pro第三方控制器Surreal Touch上手体验

Meta推出通用面部编码技术:实时逼真Avatar动画实现自然VR对话

面部动画是VR真实感的重要条件,Avatar动画需要高效和准确地捕获表情,并保持自然对话的节奏。Meta提出了一种通过消费者VR头显的摄像头实时动画化逼真Avatar的方法。他们采用了基于交叉视图重建目标的自监督学习方法,并提出了轻量级的表情校准机制来提高准确性和降低运行时效率。此外,他们还提出了改进的参数化方法以生成精确的ground truth值,并提供对环境变化的鲁棒性。Meta的目标是建立一个使用逼真Avatar模拟面对面对话的VR呼叫服务,最根本的挑战是以普遍的方式将失真、延迟和干扰最小化,并适应人类多样性和各种环境。他们的研究结果表明,所提出的方法在定量和定性方面都取得了显著改进,能够捕获极端和微妙的表情变化,并对特定的非分布输入变化具有鲁棒性。团队提出了一个通用的、准确的、实时的通用面部编码解决方案,适用于现有的消费者VR头显,并明显优于任何先前的方法。
Meta推出通用面部编码技术:实时逼真Avatar动画实现自然VR对话

VR侦探体验《Detective VR 》将于2月27日发行

VR侦探体验游戏《Detective VR》将于2月27日发行。游戏承诺提供3个故事和8个角色,游戏时间为4-6个小时。开发团队已在Meta Quest Store发布了相关的演示版本。在《Detective VR》中,玩家可以控制时间、收集线索和采访证人,通过细微的观察和套取的证人证词来揭露真相。完整的游戏提供了4-6个小时的游戏时间,包括三个故事和8个角色。玩家可以像名侦探柯南或福尔摩斯一样行事,并在引人入胜的真相调查过程中享受侦探的乐趣。此外,该作品以MR作为特色,根据房间的布局生成相应的场景。有关游戏的演示版本可在Meta Quest Store上获取。
VR侦探体验《Detective VR 》将于2月27日发行

健身游戏《Shardfall: FitQuest VR》登陆Meta Quest Store

VR游戏开发商和发行商Quell Tech的沉浸式健身游戏《Shardfall: Fit Quest VR》近日正式登陆Meta Quest Store。这款游戏通过全身、个性化的锻炼来挑战玩家,让他们挥舞拳头为世界的命运而战,克服心跳加速的挑战,燃烧卡路里。故事背景设置在一个机器正在蹂躏的世界中,玩家需要击败各种敌人来恢复自然平衡。游戏中的锻炼方式非常独特,玩家需要大幅活动身体来击败敌人并燃烧脂肪。游戏包含战斗和奔跑两种锻炼方式,玩家需要用有力的拳头对抗敌人,通过闪避和阻挡来避开攻击。同时还可以奔跑躲避障碍物,在跑步时收集魔法球增加愤怒值。游戏还提供跟踪进步和快速训练等功能,玩家可以通过分析和个性化提示来跟踪自己的进步,调整训练的长度、难度和类型来适应健身目标。
健身游戏《Shardfall: FitQuest VR》登陆Meta Quest Store

Vuzix与广达合作发布眼镜参考设计Ultralite Pro OEM和Ultralite Audio OEM

AR波导眼镜厂商Vuzix与广达合作研发了两个眼镜参考设计:Ultralite Pro OEM和Ultralite Audio OEM。Ultralite Pro OEM搭载高通骁龙AR1 Gen 1平台,结合了双全彩Avegant LCoS投影仪和超薄双眼波导光学器件,提供生动的3D增强现实体验。该设备集成了声控命令、板载摄像头和强大的麦克风阵列,可实现直观的控制和实时照片和视频捕获。Ultralite Audio OEM基于Ultralite Z100,集成了双扬声器和降噪麦克风以增强音频和语音交互,搭载单色Micro LED投影仪,续航时间长达两天。 Vuzix正在CES大会上展示Ultralite Pro OEM和Ultralite Audio OEM,以及最新的波导技术进展,包括全彩色1.0mm轻薄波导和为ODM/OEM需求量身定制的其他设计。这些波导旨在支持尖端的人工智能应用,具有单眼和双目配置,视场范围从30到40度,并集成了Vuzix专有的隐形技术,可用于精细的高性能AR显示。 Vuzix首席执行官保罗·特拉维尔斯表示,Vuzix的产品和技术在性能、可扩展性和成本效益方面树立了基准,吸引了广达等合作伙伴,可以为ODM/OEM合作伙伴提供创新解决方案并帮助塑造行业。
Vuzix与广达合作发布眼镜参考设计Ultralite Pro OEM和Ultralite Audio OEM