Nweon

nweon 文章

微软AR/VR专利分享用于ToF成像的运动校正方法

ToF(Time of Flight)摄像头是一种深度感知系统,可用于为HoloLens 2生成环境的深度图像。ToF成像是根据从对象反射回来的调幅光的相移来计算深度的一种技术。然而,在对相位数据进行采集时,由于ToF摄像头的运动,帧内相位数据可能会相对移位,导致运动模糊。因此,微软提出了一种运动校正方法。该方法使用两个不同照明光调制频率的主动亮度图像进行比较,以确定帧内二维平移,然后将此二维平移应用于相位数据,帮助对相位图像进行校正和相位展开,形成校正后的深度图像。此外,帧内二维平移还可以应用于帧内主动亮度图像进行校正,从而进一步减少运动模糊。该方法可以实时执行运动校正,并具有相对高效的计算性能。此外,帧内二维平移还可用于确定帧间运动以及后处理应用。该方法可以提高深度成像系统的性能。
微软AR/VR专利分享用于ToF成像的运动校正方法

莱斯大学开发可穿戴纺织品设备,补偿视觉、听觉输入体验

莱斯大学的工程师们开发了一种可穿戴的、基于纺织品的设备,旨在通过利用触觉资源来弥补视觉和听觉输入的不足。团队认为这种技术未来可以用于虚拟现实,并提供触摸抚摸的反馈。他们使用流体控制将触觉线索编程到可穿戴设备的纺织结构中,从而减少了对硬件的需求。这种设计可以定制振幅、空间和时间控制,使可穿戴设备能够在四个方向提供时空线索。研究人员认为纺织品是一种可以满足需求的材料,因为它们广泛应用于服装,并且社区已经开始尝试应用触觉反馈。测试显示触觉纺织品的耐用性良好。除了虚拟现实,这种可穿戴纺织设备还可以结合其他传感和控制机制,帮助视力或听力有限的用户实时检测障碍物并在动态环境中导航。另外,它也有可能提高人工耳蜗的性能,以及帮助截肢者恢复触觉。
莱斯大学开发可穿戴纺织品设备,补偿视觉、听觉输入体验

苹果专利改进沿平面运动的AR/VR对象的渲染,逼真模拟物理定律

苹果公司在名为“Xr preferred movement along planes”的专利申请中提出了一种改进的技术,用于在XR环境中渲染虚拟对象,特别是在沿平面移动时。该技术利用了不同粒度水平的几何表示来确定虚拟对象的位置和呈现方式。苹果指出,通过利用较少粒度的表示,可以减少渲染和呈现虚拟对象所需的资源,从而优化电子设备的性能。在虚拟对象移动时,电子设备可以根据不同表示之间的差异来调整呈现方式,并在需要时扩展表示以继续呈现虚拟对象的移动。此外,该技术还可以根据物理表面的几何表示来确定虚拟对象的位置,并将其渲染在物理表面上或在物理表面上移动。这项专利申请于2023年6月提交,并已公布。
苹果专利改进沿平面运动的AR/VR对象的渲染,逼真模拟物理定律

五部门公布70个AR/VR先锋应用案例,涵盖工业、文旅、教育、体育、医疗等等

为了推动虚拟现实技术的应用和发展,中国的工信部、教育部、文旅部、国家广播电视总局和国家体育总局联合发布了一份通知,征集并选取了70个先锋应用案例,涵盖工业生产、文化旅游、融合媒体、教育培训、体育运动、医疗健康、商贸创意、演艺娱乐、安全应急、残障辅助和智慧城市等多个领域。这五个部门要求各地的相关主管部门结合当地实际情况,加大对入选案例在技术创新、应用落地和政府服务等方面的支持力度,推动优秀成果的规模化应用。
五部门公布70个AR/VR先锋应用案例,涵盖工业、文旅、教育、体育、医疗等等

所思即所得,Meta DINOv2深度学习可将大脑活动转化为相似图像

据映维网报道,未来的人机交互可能超越触控屏和键盘,甚至超越眼睛和手势,最终实现真正的脑机接口。除了马斯克的Neuralink,一些巨头如Meta也在积极探索相关概念。近期,来自Meta和巴黎文理研究大学的研究人员发布了一款新型深度学习应用程序Image Decoder,该程序可以将大脑活动转化为与所看到或所思相似的图像。通过大脑磁图(MEG)等非侵入性神经成像技术,人工智能系统Image Decoder可以实时地解码大脑中视觉表征的展开,并重建每个瞬间感知和处理的图像。这一技术除了帮助科学界理解图像在大脑中的表现方式,还为临床环境中的非侵入性脑机接口提供了潜在的应用前景。研究结果显示,通过对大脑活动解码,可以产生连续的图像流,但生成的图像仍然不完美,尤其在低级特征的准确性方面还有待改进。这项研究加强了对人类智能基础的认识,同时也为人工智能系统的未来发展提供了指导。
所思即所得,Meta DINOv2深度学习可将大脑活动转化为相似图像

Snap计划向美国至少50所学校提供AR学习课程

Snap与沉浸式XR学习平台Inspirit合作,利用Snapchat的AR开发平台Camera Kit来构建基于移动设备AR的学习体验。合作开始时,共有25个交互式的初中和高中STEM教学模块。通过利用Snapchat的AR开发平台提供的数字可视化,学生可以通过有趣的交互式内容提高兴趣和知识留存,从而在现实世界中掌握核心STEM概念。Snap计划向全美至少50所学校提供相关的AR学习模块,并根据情况继续扩展。团队表示,这次合作是由Inspirit、Snapchat和K-12教育管理机构Stride在2023年共同开展的一项案例研究的基础。调查显示,92.3%的学生发现内容易于理解,84.6%的学生表示对STEM主题产生了兴趣,并且教师们报告了与课程的积极联系,包括注意力的持续时间增加。
Snap计划向美国至少50所学校提供AR学习课程

彩虹六号风格游戏《Breachers》将于11月登陆PSVR 2

由育碧蒙特利尔工作室开发的战术射击游戏《彩虹六号:围攻》备受玩家欢迎。《Breachers》是一款类似于《彩虹六号:围攻》的VR游戏,它将类似的概念引入了虚拟现实。该游戏已经在PICO、Steam、Meta、Quest和Rift上提供支持,使玩家可以身临其境地享受5v5的战术射击快感。开发团队宣布《Breachers》将于今年11月登陆索尼PSVR 2平台,但未透露具体的日期。在游戏中,由五人组成的特种部队将进入一个扭曲的实验室,试图对抗同样数量的敌对玩家。与《彩虹六号:围攻》不同的是,《Breachers》中,玩家可以使用绳索爬墙或炸毁加固窗户来突破内部。防守方则需要利用技术设备、地雷和运动探测器等来应对对方的进攻。同时,在游戏开始前,玩家可以从商店购买各种武器和辅助工具。《Breachers》将于今年11月登陆索尼PSVR 2,敬请期待。
彩虹六号风格游戏《Breachers》将于11月登陆PSVR 2

传腾讯代理Meta Quest事宜已全谈妥,仅差最后拍板

根据映维网Nweon于2023年10月18日的报道,《界面新闻》指出腾讯已经重组了XR业务,并新成立了XR设备与内容业务部门。该部门负责腾讯自有品牌XR设备的研发、销售、市场推广以及相关的内容生态建设。此外,报道还称腾讯代理Quest 2事宜已经全面谈妥,只差最后敲定。腾讯在今年8月重组了XR团队,与苹果正式入局XR市场后,腾讯对这一行业的关注再度热烈起来。消息人士透露,重组后的腾讯XR部门不仅会代理产品,还将继续进行自研项目,但没有透露更多细节。关于代理Quest的问题,知情人士表示“一切谈妥了,就差最后敲定”。报道指出,腾讯谈判的是Quest 2而不是刚刚发布的Quest 3,但中国版的Quest 2将是“换芯片的升级版”。最后,腾讯目前尚未就报道置评。
传腾讯代理Meta Quest事宜已全谈妥,仅差最后拍板

育碧分享“刺客信条”VR游戏玩法细节,即将登陆Quest平台

育碧官方日前分享了《刺客信条 Nexus VR》在Meta Quest 2、Quest 3和Quest Pro上的上手体验。玩家可以在该游戏中扮演系列作品最受欢迎的三位英雄,通过第一人称VR在大而开放的地图中进行攀爬、暗杀和与守卫战斗等活动。游戏提供了丰富的潜行机会,玩家可以使用各种技巧来获取目标物品。在跑酷方面,玩家可以快速而直观地进行移动,通过摆头来调整轨迹。除了潜行和跑酷,玩家还可以与守卫进行战斗,操作武器进行阻挡和反击。游戏世界中还有许多动态对象可以与之交互,例如扔、砸、抓等。此外,玩家还可以使用Animus Scout功能鸟瞰周围环境,准确掌握敌人和目标的位置。《刺客信条 Nexus VR》将于11月16日在Meta Quest系列平台独占发行。
育碧分享“刺客信条”VR游戏玩法细节,即将登陆Quest平台

Meta Quest 3 游戏娱乐13条使用小技巧

2023年10月18日,Oculus Quest 3已经发货,并附带了一系列有用但通常隐藏的功能。以下是13个技巧和诀窍: 1. Quest 3截图和视频捕获快捷方式:按住Meta按钮并扣动扳机键进行截图,按住Meta按钮和扳机键几秒钟进行视频录制。 2. Quest语音命令:通过语音命令启动游戏、搜索商店、导航头显、截图和录屏等。 3. 控制器追踪和手部追踪之间的切换:通过快捷键从控制器追踪切换到手部追踪。 4. 强制截图和录屏同步到手机:通过菜单选项将截图和录屏同步到手机。 5. 双击以启用Passthrough透视:通过双击轻触头显侧面或控制器来打开透视视图。 6. 打开120Hz刷新率:将刷新率提高到120Hz以获得更流畅和低延迟的体验。 7. 扩展电池模式:打开扩展电池模式以最大限度地延长续航时间。 8. 设置自己的360度背景:在Quest Home首空间中使用自己的360度照片作为背景。 9. 锁定个人Quest应用程序以保护隐私:通过设置应用锁定功能来锁定特定的应用程序。 10. 色盲模式和文字大小:打开色盲模式和调整文本大小来提高可访问性。 11. 使用滑动输入法:启用滑动输入法来更快地打字。 12. 投屏到手机或浏览器:将头显的视图投屏到智能手机或浏览器上。 13. 从智能手机启动应用程序:在智能手机上预加载应用程序,以便在戴上头显后立即开始游戏。希望这些技巧对你有帮助。
Meta Quest 3 游戏娱乐13条使用小技巧