Insider Insider

Nweon

nweon 文章

苹果AR/VR专利介绍一种用于手指方向触碰的检测方法

电子设备提供了各种与周围世界互动的方式,其中触控屏界面是用户与数字信息交互的一种常见方式。然而,随着混合现实的兴起,用户常常需要通过其他方式提供输入,这通常不包括传统的触控传感器。苹果公司认为将物理表面增强为触摸屏可以实现用户、计算系统和真实表面之间的直观交互,因此申请了一项名为“Finger orientation touch detection”的专利。该专利介绍了一种用于手指方向触碰检测的方法。通过将用户意图与触摸表面相结合,可以改善交互体验。深度图像可用于确定手指位置和方向,并可用于确定触摸状态和目标区域的几何特性。触摸区域可以包含数字信息,并可基于相关联的数字信息触发事件。触控模块可以利用手指方向和触摸区域来估计目标区域,并可进一步基于用户的视线方向进行细化。通过这种方式,用户可以更直观地与混合现实环境进行交互。
苹果AR/VR专利介绍一种用于手指方向触碰的检测方法

桥水基金瑞·达利欧用HoloLens 2装配海洋科考船,模拟逼真海底世界

桥水基金创始人瑞·达利欧和他的儿子马克·达利奥购买了一艘油轮并将其改造成为一艘先进的科考船,名为OceanXplorer。他们希望通过这个项目改变人们对海洋生物的认知。同时,他们与《国家地理》和BBC合作,拍摄相关的宣传纪录片。OceanXplorer还与微软合作,在船上建立了一个全息实验室,科学家可以穿戴HoloLens头显并感知逼真的海底世界模拟。这艘科考船是由勇敢的探险家和科学家组成的团队探索世界海洋的边界,包括前往亚速尔群岛的大西洋深处、潜入巴哈马群岛的浅滩和加勒比海的温暖水域,以及登上挪威斯瓦尔巴群岛北极海岸。为了帮助科学家工作,瑞·达利欧和马克·达利奥配备了一系列先进的科技,包括微软的HoloLens头显,科学家可以利用这款设备可视化复杂的数据,并感受逼真的海底模拟,将数字与水下环境相结合。这种方式让科学家能够感受到一个生动逼真的海底世界,就像生活在未来。马克·达利奥表示,希望这个船看起来和感觉像是海洋版的企业号星舰,以激励和鼓舞下一代科学家、学生和教育工作者。
桥水基金瑞·达利欧用HoloLens 2装配海洋科考船,模拟逼真海底世界

整活达人用Quest 3 MR将键盘式PC树莓派Pi 400实现空间计算体验

2024年9月3日,Meta Quest推出了HDMI Link串流工具,通过USB-C接收和显示视频。用户伊恩·汉密尔顿将树莓派Pi 400组装成了一个快速的概念机,可以搭配VR头显进行空间计算工作。树莓派Pi 400是将树莓派板子集成到键盘的PC,具有Micro HDMI端口用于显示、USB-C端口用于电源输入和USB-A端口用于连接设备。这样的组合为用户提供了一个相对简便的PC设置,可以在咖啡馆或图书馆等地方使用头显进行办公等操作。
整活达人用Quest 3 MR将键盘式PC树莓派Pi 400实现空间计算体验

动作冒险游戏《Into Black》将于10月登陆Meta Quest

《Into Black》是一款即将登陆Meta Quest的合作动作冒险游戏。该游戏的灵感来自于《深岩银河》,并旨在提供类似的游戏玩法。游戏由VR工作室The Binary Mill制作,他们曾开发《Resist》、《RUSH》、《Mini Motor Racing X》和《Gun Club VR》。玩家将扮演太空边缘的孤独流浪者,与一个只想泡茶的小机器人一起探索宇宙中古老的谜团。游戏邀请玩家和朋友一起探索无尽的黑暗,开采宝贵的资源,并与外星怪兽战斗。游戏提供20多个关卡,涵盖多种独特的生物群落。除了单人和合作模式外,游戏还设置了PvPvE模式,玩家可以面对多达11个其他玩家,并在不断缩小的迷宫中收集战利品。《Into Black》将于10月登陆Meta Quest Store,售价25美元。
动作冒险游戏《Into Black》将于10月登陆Meta Quest

研究员探索在鞋部添加触觉反馈,增强AR/VR行走真实感

根据日本丰桥技术科学大学的研究发现,同步的足部振动可以提升AR/VR虚拟行走体验。步行是一项基本的人类活动,对身体活动、认知和感官知觉都有影响。在虚拟环境中利用AR/VR模拟行走已经得到极大关注,因为它在旅游、娱乐、训练和康复等领域有很大的应用潜力。 行走是半自动控制的,主要由中枢模式发生器控制,并通过视觉、前庭感觉和本体感觉等感官信息的整合来优化运动。研究发现,在虚拟行走系统中,结合视觉诱导的自我运动和足部振动的触觉反馈可以增强虚拟环境中行走的真实感,并改善行走感和临场感。通过模拟腿部运动,这种足部振动可以产生逼真的行走体验。 相关研究结果可能对开发更具包容性的VR体验有帮助,特别是对于行动不便的人。潜在的应用包括康复项目,允许患者在不同位置进行虚拟行走练习,或进行更逼真的虚拟现实训练模拟。此技术还可以提高VR娱乐的沉浸感。
研究员探索在鞋部添加触觉反馈,增强AR/VR行走真实感

微软和西交利物浦大学团队探索用于XR的棍棒状交互控制器

微软和西交利物浦大学的研究团队进行了一项关于XR棒状有形用户界面设计的研究。虽然棒状设计在日常物品中被广泛应用,但作为XR用户界面的应用尚未得到系统研究。为了调查棒状对象的可用性以及在XR中的应用,团队与12位XR和人机交互专家进行了一次参与式设计会议。研究人员根据功能和握持手势开发了基棒状对象的可视性分类,并提出了四种类型的棒状XR控制器形式,讨论了它们的优点和局限性。棒状设计广泛应用于日常物品中,而有形用户界面(TUI)可以使用户通过物理对象和材料与数字信息进行交互。此研究目标是探索和理解基于棒状对象的XR UI设计,并提出了拐杖式接地棒、模块化设计、更灵活的细棒设计、长度变化设计和可扩展绳式设计等未来可能的方向。这项研究为XR界面设计提供了新的思路和机会。
微软和西交利物浦大学团队探索用于XR的棍棒状交互控制器

研究员提出基于transformer算法的多模态时间序列传感器数据的晕动症预测模型

晕动症是阻碍用户在虚拟现实中沉浸体验的一个问题。近期有研究使用人工智能进行晕动症的预测,以提升用户体验。韩国汉阳大学的研究团队提出了基于transformer算法的晕动症预测模型。他们使用多种传感器数据(眼动、头部运动和生理信号)构建了MSCVR数据集。研究团队提出了两种将多模态时间序列传感器数据嵌入transformer的方法:用于归一化传感器数据的MS-STTN和用于频谱图的MS-STTS。实验结果表明,MS-STTN模型表现最佳,具有较高的准确性。通过分析数据特征的重要性,研究人员发现眼动特征对晕动症具有显著影响。这项研究通过提供晕动症预测模型和对传感器数据与晕动病的关联的见解,为虚拟现实技术的改进提供了全面理解。详情请参考相关论文和MSCVR数据集的链接。
研究员提出基于transformer算法的多模态时间序列传感器数据的晕动症预测模型

如何用Meta Quest 3播放苹果的3D空间视频

本文介绍了如何在Meta Quest 3上播放苹果的3D空间视频。要使用Meta Quest 3播放苹果的空间视频,需要具备一定的硬件和软件条件。首先,需要配备Meta Quest头显,并确保头显操作系统版本为v62或以上。其次,需要使用iPhone 15 Pro或Pro Max来录制空间视频,并确保安装了Meta app并登录相关账号。文章强调了Meta表示只有iPhone 15 Pro或Pro Max才能上传空间视频的重要性。在完成手机和头显的绑定之后,就可以在Meta app中选择和上传之前录制的空间视频。在Meta Quest 3中播放空间视频也非常简单,只需在仪表盘的文件图标中找到“空间视频”选项卡,选中要播放的视频即可。文章最后对播放中的视频画面位置和质量进行了一定的评价和抱怨,并希望Meta在未来可以改进这些问题,增加用户的沉浸感。
如何用Meta Quest 3播放苹果的3D空间视频

Meta Quest 3S已通过美国FCC认证,预计月底Connect大会发布

根据美国联邦通信委员会公开信息,一款产品ID为2AGOZ-P97的VR头显已通过FCC认证,将在美国境内正式发售。尽管文件没有透露具体的设备名称,但很可能是在美国时间9月25日举行的Connect大会上发布的Quest 3S。文件显示,这款设备将支持Wi-Fi 6,与Quest 3相同。根据著名情报人员Luna的整理,Quest 3S的规格信息包括:初步名称为Meta Quest 3S,项目代号为Ventura/Panther,搭载高通骁龙XR2 Gen 2芯片组,配备一块Fast-Switch LCD显示器,单眼分辨率为1832×1920像素(20 PPD),帧率为90/120赫兹,采用菲涅耳透镜,支持IPD/IAD调整,提供Quest 2风格的眼镜垫片,以及4个红外追踪摄像头和2个RGB透视摄像头等传感器。控制器为Touch Plus,软件功能与Meta Quest 3相同。Meta计划在9月25日举行的Connect开发者大会上发布全新的入门级头显Quest 3S。
Meta Quest 3S已通过美国FCC认证,预计月底Connect大会发布

大朋VR 8月月报 | 国内新方案落地 海外新增三大合作商

大朋VR与广州即视互动科技合作,在海口职业教育学校推出全新VR教育服务影院,为学生提供历史故事和神话传说等观影课程。DPVR E4性能版在“大众模拟房车赛”中亮相,吸引了不少人的关注。大朋VR与迈腾动漫合作推出“枪+DPVR E4”方案,提供更沉浸的射击体验。青海西宁童梦世界VR体验店引入了DPVR E4性能版与卓远VR的暗黑战场街机,获得了众多玩家的好评。DPVR E4性能版成为河南数字公园选用的主要体验设备。DPVR E4性能版在中国人民革命军事博物馆展位上展示了决胜时刻。北京二中某校区启用了45台DPVR P1 PRO-4K(ULTRA),助力教师创新课堂教学。DPVR与LAI Games合作测试DPVR E4性能版,有望为全球街机市场带来变革。DPVR的英国合作伙伴与Mission Zero认证运营商合作进行虚拟现实安全驾驶课程培训,取得了显著成果。美国西平原公共图书馆获得了DPVR P1 PRO Edu解决方案的资助。在澳大利亚的EduTECH展会上,DPVR的合作伙伴展示了创新的VR教育解决方案。在韩国首尔EDU PLUS WEEK教育展上,DPVR的合作伙伴展示了针对中学和以上教育机构的教育解决方案。DPVR与合作伙伴Rawthrills合作推出的哥斯拉大战怪兽街机解决方案入驻了娱乐连锁店铺,成为全球市场上最引人入胜的街机之一。
大朋VR 8月月报 | 国内新方案落地 海外新增三大合作商