苹果AR/VR专利提出图像数据+超声数据的混合注视追踪方法

苹果公司在一份专利申请中提出了一种使用图像数据和超声数据的混合注视追踪方法。该方法利用各种组合方式使用超声数据和成像数据来实现精准注视追踪,并以较低的功耗率运作。相比单独使用其中任一种方法,同时使用图像数据和超声数据的注视追踪更稳健,因为成像数据受温度、压力和气流的影响较小,而超声数据受到杂散光的影响较小。 该专利申请中描述了实施例,其中使用传感器识别眼球的位置和眼球运动,并利用眼球的深度信息来确定眼睛的位置/方向。通过同时使用超声数据和光测量数据的不同组合,可以有效对抗环境噪声,获得所需的注视追踪精度和功耗率。 此外,该专利申请还介绍了一个头显系统,其中包括注视追踪系统,可以检测眼球位置和眼球运动,并进行注视追踪。头显系统通过组合成像系统和超声系统的数据来提供更稳健的注视追踪功能。 总的来说,苹果公司的这项专利申请提出了一种创新的混合注视追踪方法,有望提高AR/VR头显的眼动追踪精度和稳定性。
苹果AR/VR专利提出图像数据+超声数据的混合注视追踪方法

游戏《Trombone Champ: Unflattened》将于下个月上线Quest

2022年,音乐节奏游戏《Trombone Champ》获得了BAFAT提名,受到广泛关注。近期,游戏工作室Flat2VR Studios与Holy Wow Studios宣布其VR版本《Trombone Champ: Unflattened》将于11月26日上线Meta Quest,售价14.99美元,目前已开放预定。该游戏包含50首古典、民谣和流行音乐,玩家可收集长号手卡并定制乐器,Quest 3和Quest 3S玩家还可体验混合现实功能。
游戏《Trombone Champ: Unflattened》将于下个月上线Quest

《节奏射手:“长号冠军”》将于11月登陆Quest,观看预告片请点击此处。

《长号冠军:拓展版》(Trombone Champ: Unflattened)是2022年独立韵律游戏的VR改版,将于11月26日登陆Quest平台。游戏以VR为创作背景,重新构建了这个病毒式韵律游戏,让玩家能够在动态音乐厅中表演,并在多种不同特性、声音和动画效果的长号上演奏。游戏还推出了充满节奏和时间挑战的关卡模式,玩家可以在与观众互动的实时反应环境中进行演奏。首发版本将包含50首音轨,跨越古典到现代各种流派。玩家可以收集“长音号使者卡”、定制乐器,并揭示“长音宇宙”的秘密。游戏将于11月26日在Quest平台正式上线,并支持Quest 3和Quest 3S的混合现实。现在可以在Horizon Store上预订Quest版本的游戏,该版本也支持Quest 2和Quest Pro。此外,游戏还计划在某个时间点登陆SteamVR头显和PSVR 2平台,但具体发布日期尚未确定。

中美研究员为AR/VR提出针对NeRF模型的“加速算法”

研究人员在一项研究中展示了神经辐射场(NeRF)在移动系统中的应用瓶颈,并引入了名为CICERO的解决方案。他们通过两种算法和一种片上数据布局策略解决了NeRF的性能问题。CICERO的纯软件实现在移动Volta GPU上提供了8倍的加速和7.9倍的节能,与专用DNN加速器基线相比,加速和能量减少增加到28.2倍和37.8倍。研究人员还提出了稀疏辐射扭曲(SPARW)方法,通过重复使用前一帧计算的射线辐射来减少NeRF中的计算工作量。他们还优化了内存访问和数据布局,通过以内存为中心的顺序访问和通道主布局来解决不规则的DRAM访问和SRAM组冲突。最终,他们将CICERO与三种先进的NeRF模型集成,实现了数量级的加速和节能。 以上是一项关于神经辐射场在移动系统中应用瓶颈及其解决方案的研究。通过引入算法和架构的改进,并优化内存访问和数据布局,研究人员成功提高了NeRF的性能,并在移动系统上实现了较大的加速和节能。
中美研究员为AR/VR提出针对NeRF模型的“加速算法”

索尼AR/VR专利提出机器人再现快速眼球运动,改善训练模型

索尼提出了一种机器人快速眼动模拟人眼扫视的技术,通过调整图像捕获时间和生成的图像序列时间压缩,使得机器人的眼睛能以人眼的速度进行扫视。这种技术解决了机器人眼球运动速度不足的问题,可以用于头显测试和实验。该技术利用机器学习训练的人工神经网络和人工智能模型来处理数据以进行推断,模型包括输入层、输出层和中间的多个隐藏层。通过与传感器相关联的致动器控制机器人眼在插槽中移动,并通过摄像头和照明器进行图像捕获和显示。在机器人测试或校准眼动追踪系统时,可以通过拍摄机器人眼球运动作为慢动作现象来模拟快速眼球运动,并以更快的动作播放所产生的视频。这种方法可以虚拟地再现扫视,同时节省时间。索尼的专利申请名为“Reproducing fast eye movement using imaging of robot with limited actuator speed”,最初于2023年4月提交,并已公布。
索尼AR/VR专利提出机器人再现快速眼球运动,改善训练模型

加州大学团队提出AR/VR可穿戴触觉人造肌肉皮肤HAMS

美国加州大学团队提出了一种可穿戴触觉人造肌肉皮肤(HAMS),可以集成到XR系统中,增强沉浸感并在娱乐、教育和辅助技术中应用。HAMS基于全软毫米级多层介电弹性体致动器(DEA),能产生明显的面外变形和压痕,实现复杂的触觉反馈,并具有高感知精度。传统的触觉致动器在形状参数和特定身体部位的限制方面缺乏通用性,限制了用户的沉浸式体验。HAMS提供了一个有前景的替代方案,可以灵活适应不同身体部位,减少侵入性,并实现与虚拟环境的自然交互。HAMS使用全软毫米级多层介电弹性体致动器,可以产生大的面外驱动,实现高位移和高力,并保持高性能。HAMS可以无缝地附着在皮肤上,提供复杂的触觉反馈,具有超过90%的感知精度。HAMS的柔软结构和可穿戴性使其具有扩展性和定制性,适用于不同的皮肤表面,并可以覆盖整个身体。团队表示,将HAMS应用于用户身上并与VR头显相结合,可以提供身临其境的XR体验。
加州大学团队提出AR/VR可穿戴触觉人造肌肉皮肤HAMS

PrismXR为Apple Vision Pro提供了一个专用充电座

PrismXR为Apple Vision Pro提供了一个专用充电座,售价为90美元。这个充电座由硅胶制成,内部有头显和系留电池的插槽。它具有以下主要特点:触控充电功能,只需将Apple Vision Pro电池放在充电支架上即可开始稳定高效的充电;65W超快充电功能,在40分钟内可将设备电池充电至80%;具有触感柔软的硅胶表面,提供可靠的保护以防止划伤;巢仿生设计,来源于自然巢的灵感,提供紧凑的包装便于组织存储;配备线缆收纳设计,方便整理电池线缆,保持桌面整洁;具有过流、过压、过热、过充保护功能,确保Vision Pro电池充电时的安全可靠。有兴趣的用户可以访问亚马逊页面了解更多信息。
PrismXR为Apple Vision Pro提供了一个专用充电座

PICO 4 Ultra OS推送V5.12.0.U系统版本更新

PICO最近开始推送PICO 4 Ultra V5 12.0 U系统的新版本,主要升级了PICO互联功能,支持蓝牙键盘和蓝牙鼠标,以及浏览器多窗口功能等。新增的功能包括手机互联功能,支持手机镜像显示和操作;支持连接蓝牙键盘和鼠标;视频播放器有重大更新,支持透视模式观看视频,可以自由摆放和调整播放窗口大小;浏览器支持多窗口功能,可以新建窗口并在导航栏上查看多个窗口。此外,还对相册观看、全景屏远近距离调节、2D应用的显示清晰度、社交体验、输入法、手势算法、手柄追踪算法架构及体感追踪器进行了升级和优化。同时,系统性能也有优化,功耗降低。修复了一些问题,如安全区外导航栏功能无法点击、特定情况下的透视画面闪烁、手柄截屏键不生效、部分蓝牙耳机不兼容等。
PICO 4 Ultra OS推送V5.12.0.U系统版本更新

2024年10月28日Quest、Steam最新VR游戏畅销榜

本文是关于Meta Quest、Meta Rift和Steam平台最新畅销VR游戏的报道。Rift Store、Steam和Meta Quest分别是主流的PC VR内容平台和一体式6DoF移动VR平台。 畅销游戏列表是实时变化的,括号中的价格为原价。文章中还附有Steam VR游戏应用的TOP 10列表。 图片展示了VR游戏畅销排行榜TOP 10。 《Steam VR游戏应用TOP 10》
2024年10月28日Quest、Steam最新VR游戏畅销榜

PlayStation VR Store每周新内容

每年的10月27日是世界音像遗产日,旨在提升公众对音像遗产保存的认识,强调音像档案的脆弱性和保护的重要性。这篇文章介绍了三款虚拟现实游戏。 第一款游戏是《VENDETTA FOREVER》,价格为148港元和24.99美元,适用于PS5设备。玩家需要在战斗中消灭敌人,并夺取他们的武器进行战略性规划,最终战斗至胜利。 第二款游戏是《Whitewater VR - Extreme Kayaking Adventure》,价格为148港元和19.99美元,适用于PS5设备。玩家可以在虚拟现实中体验划桨穿越世界上最具挑战性的急流,并与时间赛跑。 第三款游戏是《House Flipper VR》,价格为108港元和14.99美元,适用于PS5设备。玩家可以在游戏中建造和翻新房屋,进行墙壁的建造和破坏,清理虫子,粉刷墙壁等工作,使房屋恢复昔日的辉煌。
PlayStation VR Store每周新内容