Insider Insider

Nweon

nweon 文章

Air Orbe允许你穿戴Vision Pro对家居智能设备实现MR菜单控制

苹果希望通过Apple Vision Pro打造全新的空间计算生态,并整合其他设备,实现通过眼+手控制家居设备的用例。一款名为Air Orbe的免费应用可以帮助穿戴Apple Vision Pro的用户通过MR菜单控制智能设备。利用苹果的HomeKit框架,Apple Vision Pro用户可以通过瞥一眼智能家居设备实现控制,如调整灯的亮度、颜色和开关等。物理设备会显示可操作的虚拟标记,并在智能设备附近弹出相关的情景菜单,允许用户进行调整设置。此外,像小米和高通等公司也在探索通过AR设备实现智能家居的智能协同。以小米无线AR眼镜探索版为例,用户可以通过眼睛看向设备来操作它们,例如通过手势关闭台灯。
Air Orbe允许你穿戴Vision Pro对家居智能设备实现MR菜单控制

苹果专利分享VR/MR情景状态动态选择触觉反馈、声音反馈等交互模式

苹果公司最近提交的专利申请名为“根据情景状态动态选择感官和输入模式的方法和设备”。该专利描述了一种根据情景状态来选择感官和输入模式的方法。在不同情景中,显示的内容和相应的操作方式可能会有所不同。该专利介绍了一种系统,该系统根据用户的情景状态动态地选择感官和输入模式。系统使用各种传感器收集用户的位置、运动状态、眼动追踪等数据,并根据这些数据生成情景向量。根据情景向量和与XR环境相关的描述符,输入模式选择器选择用于与XR环境交互的当前输入模式集。感官模式选择器根据情景向量选择当前的表示模式,并在用户请求和输入的基础上进一步调整触觉反馈模式和声音反馈模式。此外,该专利还描述了一个内容管理器,用于管理和更新XR环境的布局和内容。专利中还涵盖了姿态确定器、渲染器和反馈引擎等组件。该专利的目的是根据用户的情景状态和需求来提供更符合用户体验的虚拟现实内容和操作方式。
苹果专利分享VR/MR情景状态动态选择触觉反馈、声音反馈等交互模式

墨尔本理工大学用VR研究太空环境下的感官感知反应

皇家墨尔本理工大学的科学家们通过基于VR头显的实验认为,VR作为太空环境感官研究的地面模拟方面具有巨大潜力。他们开展了关于常见食物气味的研究,因为宇航员在太空中对食物味道的感受通常较淡。先前的研究已经表明,香气在食物的味道方面起着重要作用,但在太空环境中进行测试有限。因此,研究团队转向了能够提供身临其境体验的VR头显来进行评估。他们希望通过VR工具来研究极端环境的影响,如与航天飞机禁闭有关的空间。实验表明,VR空间环境可能会影响气味感知,这取决于其挥发性成分和个体敏感性。这项研究强调了VR作为未来感官研究地面模拟的潜力,可以让科学家在类似太空环境之外的环境中进行转换。
墨尔本理工大学用VR研究太空环境下的感官感知反应

Meta研究基于眼睛跳动的渲染算法,为高分辨率显示节省>50%带宽

人类眼睛的微小移动,也被称为“微眼跳”,每秒平均发生一到两次,一天约数万次。基于这个原理,业界正在积极探索以人眼系统为灵感的眼动追踪系统,包括Meta。眼动追踪用于注视点渲染时对功耗提出了要求,所以如何优化成为一个问题。眼跳期间的视觉输入会被抑制以隐藏视网膜运动模糊的现象,这被称为眼跳抑制。Meta提出了一种利用眼跳抑制的渲染算法,利用视觉灵敏度的瞬时抑制来调整显示器操作,以降低功耗和进行潜在的侵扰性图像改变。通过分析眼动追踪数据来确定视觉中断事件的开始和持续时间,系统可以在这一期间暂停向用户呈现图像或降低亮度,从而降低计算成本和设备功耗。Meta表示他们提出的眼跳渲染算法可以为高分辨率显示器节省带宽,并经过实验证实了算法的可行性。
Meta研究基于眼睛跳动的渲染算法,为高分辨率显示节省>50%带宽

Cortopia Studios宣布《逃离仙境》今年秋季登陆Quest Store

Cortopia Studios has announced that the sequel to "Alice in Wonderland: Chronicles of Alice" called "Escape Wonderland" will be available on the Meta Quest Store in the fall of this year for $19.99. The game, set in the same world as its predecessor, follows a new story with new characters. Players take on the role of Molly and guide her through the Wonderland, solving puzzles and helping her regain her memories. In addition to familiar faces, the game will feature a series of new characters and locations. The VR adventure game immerses players in a whimsical world and emphasizes exploration.
Cortopia Studios宣布《逃离仙境》今年秋季登陆Quest Store

苹果AR/VR专利提出基于机器学习推断着色技术生成Avatar

苹果提出了一种名为“Inferred Shading”的专利申请,旨在利用基于机器学习的推断着色技术生成逼真的Avatar。该系统通过训练推断着色网络,将照明值、几何表情模型、头部姿势和相机角度等信息映射到环境照明的纹理上,从而实现对面部纹理的生成。在训练阶段,可以使用合成图像或真实环境中的图像来训练自动编码器,并获得照明值的表示。然后,照明编码器可以与纹理解码器结合,以在特定照明条件下生成面部纹理。类似地,还可以使用照明编码器生成对象的纹理。通过使用推断着色网络和照明条件库,可以根据环境和用户姿势等变量,实时生成逼真的Avatar。该技术可以应用于虚拟现实、增强现实和游戏等领域。苹果的“Inferred Shading”专利申请于2024年3月提交,并由美国专利商标局公布。
苹果AR/VR专利提出基于机器学习推断着色技术生成Avatar

2024年07月17日Quest/Rift/Steam 促销App汇总

每日促销(每天下午6:00更新本文)。今天我们一起来看看Meta Quest、Meta Rift、Steam平台最新的促销VR App。Rift Store、Steam是目前主流的PC VR内容平台,而Meta Quest是目前国外主流的一体式6DoF移动VR平台。以下是Steam平台的促销(非完整名单)。
2024年07月17日Quest/Rift/Steam 促销App汇总

Meta Quest已经开始放出v68 PTC版本

Meta已经发布了v68的PTC版本,其中主要增加了“Seamless Multitasking”无缝多任务模式、控制器图标和调整环境亮度等功能。根据X和Reddit社区的信息,v68的PTC版本还提供了环境亮度调节和无缝多任务模式。无缝多任务模式允许用户在沉浸在应用中时,同时使用通用菜单和窗口进行其他任务,如观看视频、回复信息等。同时,新版本还为Quest 3头显引入了类似于Apple Vision Pro的环境亮度调节功能,使用户在浏览照片/视频时周围环境变暗,提升影音体验。需要注意的是,PTC版本是抢先体验内容,其中的功能不一定会出现在最终的正式版本中。
Meta Quest已经开始放出v68 PTC版本

Meta分享:与社区合作协同设计更具包容性的Quest硬件

Meta(前Facebook)认为将服务于所有人的产品打造成为其使命的核心。最好的产品是通过与社区合作而打造出来的。团队最近通过博文介绍了所谓的“以公平为中心的协同设计”,即在产品开发早期阶段将服务不足的社区成员作为平等的合作伙伴。这种方法是一种参与性方法,在产品开发过程的早期优先考虑来自不同社区、专家和学者的参与。它有助于确保解决被忽视群体的独特需求和关注,并使更广泛的人受益。协同设计不仅仅是一种方法,它是Meta在包容性和创新交叉融合承诺的核心。在混合现实产品开发中,Meta与残疾人群体合作,以确保将可访问性集成到混合现实技术的开发中。这种合作有助于团队更好地理解用户体验,并解决用户需求。协同设计需要建立基于信任和相互尊重的深层关系,并赢得用户的信任。Meta表示,以公平为中心的协同设计将为每个人创造更丰富、更有意义的产品体验。他们致力于与历史上常被忽视的社区合作,以实现更大的目标。
Meta分享:与社区合作协同设计更具包容性的Quest硬件

Virtual Desktop发布1.32.9版本,改善多显示屏支持等

Virtual Desktop最新的1.32.9版本发布,并增加了一系列的功能和优化。这些新功能包括改善了多显示屏支持以及允许禁用安全边界系统。该版本的主要亮点包括安全边界可以在透视环境中隐藏,这样当移动到游戏区域的边缘时就不会触发,不适用于完全沉浸式环境,边界可见性可以在选项中打开或关闭。另外,多显示器支持也得到了优化,屏幕现在可以夹在一起排列,移除了完全弯曲的浮动屏幕之间的间隙。MacOS的两屏或三屏串流性能也得到了改善。此外,还增加了各种键盘改进,包括ISO布局支持和Azerty重新映射。现在除了扳机键之外,还可以使用“A”键与菜单和工具栏进行交互。完整的版本说明可以在Github上访问。
Virtual Desktop发布1.32.9版本,改善多显示屏支持等