Insider Insider

Nweon

nweon 文章

苹果AR头显专利可在强光、弱光下精确呈现AR内容

苹果最近公布的一项AR头显专利申请描述了一种根据物理环境的光照条件来调整显示器操作参数的方法。这种方法可以使AR头显在强光和弱光条件下都能准确显示AR内容。专利背景概述了将计算机生成的视觉内容与现实世界相结合的问题。用户通过佩戴半透明或透明显示器的头戴设备来体验AR内容。这些显示器允许环境光线透过并到达用户眼睛,以便将计算机生成的AR内容添加到物理环境中。然而,物理环境光的颜色和亮度有时会干扰计算机生成的内容,例如限制对比度或干扰颜色组成。该专利描述的方法包括感测与物理环境光相关的多个光叠加特征值,并根据这些特征值调整显示器的操作参数,以达到合适的显示效果。这项专利申请最初于2020年9月提交。
苹果AR头显专利可在强光、弱光下精确呈现AR内容

技术与艺术的碰撞,UtopaXR如何打造出1:1虚实融合的“生命之树AR公园”?

国内的AR技术团队UtopaXR开发了一座由纯AR效果呈现的巨大公园,该公园利用大空间SLAM技术和虚实感知互动等技术,精确到厘米级别的精度为游客带来一种近乎真实的观园感受。UtopaXR团队突破了平面式的图像识别,利用大空间SLAM技术实现了探索、导航、定位、避障和路径规划等多种功能,使游客可以真实地体验到AR公园中的虚拟物体。团队还使用高精度的三维重建技术实现了数字孪生,使AR场景与现实场景更加融合和真实。为了保持环境识别的精确度,UtopaXR团队进行了多次数据采集,优化建图数据和图像识别算法。他们还通过AR全息地图导览装置和LCD屏幕等设施提供了更好的导览和亲子游体验。UtopaXR团队在过去的10年中积累了搭建三维数字化场景的技术经验,并致力于成为AR虚实融合的一体化供应商。
技术与艺术的碰撞,UtopaXR如何打造出1:1虚实融合的“生命之树AR公园”?

Snap展示Spectacles AR智能眼镜最初研发原型

Snap于上周发布了支持增强现实功能的AR眼镜,并以5亿美元收购了波导显示厂商WaveOptics。这是Snap公司有史以来最大的一笔交易,凸显了CEO埃文·斯皮格尔对AR领域的长期投入。Snap的AR产品负责人伊尔特·坎伯克通过Twitter发布了原型和最终设备的对比图,展示了产品的迭代过程。从图中可以看出,最初的设备原型非常巨大和笨重,而最终成品则更接近普通眼镜样式,时尚而社会认可度较高。 这一代的Spectacles眼镜只面向内容创作者,不面向消费者市场。AR创作者可以通过访问相关页面申请获取这款眼镜。同时,Snap还举办了第二届Snap Creative Challenge,参赛者有机会赢取Spectacles眼镜以及资金支持,从而培养AR研究人员的生态系统。Snap表示希望通过AR技术改进位于同一地点的人们之间的社交体验,让人们更快乐、更有吸引力。Snap Creative Challenge的报名截止日期是6月30日,获奖者将于7月15日公布。
Snap展示Spectacles AR智能眼镜最初研发原型

脚部控制器Cybershoes上架亚马逊开卖,标价350美元

Oculus Quest旨在让用户能够自由移动并与虚拟对象进行交互。然而,由于空间或身体限制,这个愿望并不一定能够实现。因此,VR外设厂商Cybershoes在2020年登陆Kickstarter进行众筹,以为社区提供解决这个问题的产品。众筹于今年1月成功结束,共有470人认缴了9.8万美元。现在,名为Cybershoes for Quest的相关产品已正式上架,售价350美元。 Cybershoes是一款滑轮鞋系统,其目标是帮助用户在虚拟现实中实现自然的移动。该滑轮鞋包含一个允许用户前后移动的滚轮。这款设备专门支持Quest 1和Quest 2,属于无线版本,可以通过与滑轮鞋通信的蓝牙接收器实现。 售价350美元的包装盒里包括一双Cybershoes、一张Cyber旋椅、一块60英寸的圆形地毯、一个无线接收器、一个交流适配器和所需的线缆,但不包括Quest头显。 目前,Cybershoes for Quest只支持少量Quest内容,但公司表示将很快推出更多游戏的支持。此外,该设备还可以通过Steam VR支持60多款PC VR游戏。
脚部控制器Cybershoes上架亚马逊开卖,标价350美元

虚幻引擎5推出抢先体验版,增加OpenXR 1.0全新VR模板

Epic Games最近推出了Unreal Engine 5的抢先体验版,尽管该版本还未达到生产标准,但用户可以提前体验该版本中公布以及未公布的一系列技术。Unreal Engine 5预计会在2022年初发布完整版,其中包括大量的存储、性能和质量改进,以及适用于创作者的其他新功能。抢先体验版还包括一个基于OpenXR 1.0的全新VR模板,该模板为虚拟现实项目提供了一个理想的起点,包含了基本和可扩展的功能,用于构建移动机制和对象交互。VR模板支持多个VR平台,包括Oculus Quest 1和2、支持Oculus Link的Oculus Quest、Oculus Rift S、Valve Index、HTC Vive以及Windows Mixed Reality。Epic Games强烈建议使用UE5中的VR模板来创建VR项目,并注意在使用VR项目时禁用Lumen插件。用户可以从Epic Games启动程序下载Unreal Engine 5的抢先体验版和演示项目,并在官网了解更多信息。(来源: 映维网)
虚幻引擎5推出抢先体验版,增加OpenXR 1.0全新VR模板

9月1日起所有Quest App发行都要支持Focus Awareness

Oculus宣布,从2021年9月1日起,Quest Store或App Lab的所有应用都需要支持Focus Awareness功能。Immersive Overlays是一项功能,允许用户直接在应用程序中访问以叠加形式出现的通用菜单,无需返回Home主控室环境。Focus Awareness则利用输入焦点的概念,通过判断用户的注意力位置来执行合适的操作。这两个功能可以让用户可靠地访问相关菜单,同时无需中断应用进程。团队表示,Immersive Overlays已经成为使用系统功能的首选方式,并计划将其作为系统默认设置。从现在到9月,Immersive Overlays将继续作为实验性功能提供。团队补充道:“我们相信,通过允许Quest用户能够从VR的任何地方访问系统UI,这将能为你的应用带来更具吸引力和更有意义的体验。”开发者可以参阅相关的设计指南和文档,获得详细的指导。
9月1日起所有Quest App发行都要支持Focus Awareness

万向移动平台Virtuix股权众筹,完成1900万美元融资

Virtuix是一家开发虚拟现实(VR)游戏设备的公司,最近在股权众筹平台SeedInvest的A-2轮融资中筹集到了1900万美元。该公司在2020年10月推出了Omni One,这是一款专为家用市场设计的VR娱乐系统,与Pico Neo 2配套使用,无需PC即可使用。Omni One支持玩家进行自由活动,包括奔跑、跳跃等动作,为玩家提供更真实的沉浸感。Omni One定位于家庭客厅等空间受限的场景,并提供了第一方游戏和授权游戏作品。Virtuix创始人兼首席执行官吉安·格尔特格鲁克表示,Omni One将使家庭成为通向沉浸式虚拟世界的门户,并表示投资者对该产品的支持给予了他们深刻印象。他们相信自己可以将受欢迎的游戏体验带给全球数百万个家庭。
万向移动平台Virtuix股权众筹,完成1900万美元融资

Facebook研究根据不同视点、光照动态渲染VR化身,让虚拟角色更逼真

近年来,基于学习的技术在虚拟化身创作中得到了显著增长。与传统的物理启发方法相比,基于学习的方法利用深度神经网络模拟人脸外观,实现了真实感的生成和渲染,不需要对面部几何和材质属性进行精确估计。然而,到目前为止,基于学习的技术在创建虚拟化身时仅适用于单一的照明条件,限制了其在游戏和电影制作中的广泛应用。为了克服这个问题,谷歌和Facebook Reality Labs与加州大学的研究人员探索了基于学习的再照明方法。他们通过使用深度传感器捕获对象的深度图和反射比图,并利用基于学习的方法建立了再照明虚拟化身模型。这些模型可以在新的视点、新的表情和光照条件下进行渲染,重建复杂的视觉现象。研究人员通过训练有效的模型并结合光传输的加法特性实现了动态可再照明效果。他们使用变分自动编码器框架进行训练,并建立了early-conditioned和late-conditioned模型来实现不同光照条件下的渲染。这些研究为虚拟化身的再照明提供了新的方法和技术。
Facebook研究根据不同视点、光照动态渲染VR化身,让虚拟角色更逼真

SteamDB代码透露,Valve或再次尝试研发游戏机硬件

据映维网报道,根据SteamDB公布的代码信息,Valve公司计划再次进军游戏机市场,并推出类似任天堂Switch的掌机设备。SteamDB创始人Pavel Djundik在Twitter上指出,最新的Steam测试版中涉及到了“SteamPal”和“SteamPal游戏”等字符,他认为这与代号为“Neptune”的项目有关。此外,Steam的更新还引入了“快速访问”和“电源”菜单,包括关闭、暂停、重新启动选项,以及飞行模式、WiFi和蓝牙设置。据Ars Technica的报道称,多个消息源证实Valve一直在开发一款搭载触控屏、触控板、按钮和双摇杆的便携式设备,可能运行Linux并支持经过特别优化的Steam内容,该设备有望于今年年底发布。Valve在过去曾推出过Steam Machines、Valve Index头显、Steam控制器和Steam Link等硬件产品。此外,Valve的创始人Gabe Newell在访问新西兰高校时也曾暗示将有新设备发布,这与Steam的更新提及的新设备可能相关。
SteamDB代码透露,Valve或再次尝试研发游戏机硬件

剑桥大学、Facebook联手研究用AR/VR虚拟键盘进行十指输入

现代虚拟和增强现实头显提供了以自我为中心的手部追踪,鼓励社区探索有效的徒手空中文本输入方法。然而,由于缺乏固定的物理参照系和按键的无源抗感,手部共活动对虚拟现实头显和增强现实头显上的十指文本输入造成了影响。Facebook Reality Labs和剑桥大学的研究人员在论文中探索了如何理解、检测和减轻虚拟现实中十指空中打字的共活动效应。他们提出了一种新的软件模块设计,可以根据手指动态特征来检测共活动,并将其集成到虚拟输入表面范式的解码框架中。研究人员还通过数据集挖掘来理解共活动的相关因素和分布,并评估了三种可选的检测策略的性能。实验结果表明,最终的模型可以成功地检测出共活动,并将其集成到解码框架中,从而减少了相对百分之十和绝对百分之零点九的自动校正字符错误率。
剑桥大学、Facebook联手研究用AR/VR虚拟键盘进行十指输入