Insider Insider

Nweon

nweon 文章

MIT可穿戴设备MoveU想用前庭电刺激GVS技术缓解晕动症

麻省理工学院团队开发了一款名为MoveU的可穿戴设备,旨在减少或消除现代头显所造成的晕动症。晕动症主要是因为眼睛所见与前庭所感不匹配而引起的。MoveU设备通过人工刺激前庭系统来提供本体感反馈,从而与眼睛所见相匹配。该设备采用前庭电刺激(GVS)技术,能够无创地刺激前庭系统,并支持生理感应。此外,MoveU设备还可支持多种不同动作类型的虚拟现实应用程序。目前,该设备仅为原型,研究团队将继续优化设备并评估其对缓解晕动症的影响。
MIT可穿戴设备MoveU想用前庭电刺激GVS技术缓解晕动症

谷歌体三维捕捉新突破:实现后期任意照明修改

谷歌研究人员在AR领域进行了一项创新的研究工作,开发了名为“The Relightables”的球形设施,包含了可编程LED灯泡和摄像头。这个系统能够实现人类的三维体积捕获,并能在AR或VR场景中改变对象的照明效果。这个系统通过捕获对象的深度图、创建几何和机器学习重建管道、以及捕获和合成与深度图时间同步的反射比图来实现。过去两年,三维体积视频领域一直在稳步增长,微软、英特尔、索尼和Verizon等公司都在建设自己的捕获工作室,这些技术在增强现实和虚拟现实的应用中有着广泛的用途。此外,谷歌和Opera Queensland的合作揭示了虚拟剧院这一应用场景,基于“The Relightables”捕获系统的三维内容将为沉浸式体验带来更多的真实感。
谷歌体三维捕捉新突破:实现后期任意照明修改

Oculus Quest开始免费送《星球大战》系列三章作品

Oculus宣布自11月21日至2020年1月31日期间,购买Oculus Quest的消费者将免费获赠包含三集的完整版游戏作品《Vader Immortal: A Star Wars VR Series》,价值29.97美元。消费者需在购买后30天内兑换赠品。 《Vader Immortal: A Star Wars VR Series》是由工业光魔和Oculus合作开发的作品,团队由游戏编剧、美术和程序员组成。作品由著名导演大卫·S·高耶和演员玛雅·鲁道夫领衔,展示了一段鲜为人知的星球大战历史,介于《西斯的复仇》和《新希望》之间。玩家在游戏中可以探索穆斯塔法星的火山世界,找到自己的光剑,并揭示黑武士的秘密计划。游戏的第二集将教导玩家如何使用原力和增强光剑技术,而第三集中玩家将率领一支由军进攻黑武士的城堡。《Vader Immortal: A Star Wars VR Series》让玩家参与并续写宇宙命运和黑武士的故事。
Oculus Quest开始免费送《星球大战》系列三章作品

Facebook宣布2020 F8开发者大会将于明年5月5日举行

Facebook宣布其下一届F8开发者大会将于2020年5月5日至6日在美国加利福尼亚州圣何塞的麦克内里会议中心举行。该公司表示,他们将重点介绍旗下应用的一系列最新技术,并分享未来的愿景。F8大会将提供产品演示、研讨分享,并与全球开发者社区建立联系和相互学习的机会。自收购Oculus以来,沉浸式技术在F8大会上的地位变得越发重要,这次大会将成为众多虚拟现实/增强现实新品和计划的发布平台。目前,Facebook尚未开放F8大会的申请,预计数月后会开放申请窗口。过去的开发者门票价格为595美元。如有兴趣参加,可以登录F8官网并订阅消息,当大会注册正式开放时,Facebook会通过邮件第一时间通知参会者。
Facebook宣布2020 F8开发者大会将于明年5月5日举行

Facebook研发AI注视点渲染DeepFovea,为一体机VR大大提升渲染效能

DeepFovea是一个基于AI的注视点渲染系统,主要用于虚拟现实和增强现实显示器。它采用了少量像素数量,同时能够实现逼真的注视点全画质体验。通过使用生成对抗网络(GAN),DeepFovea可以根据稀疏的输入生成自然视频片段。在测试中,DeepFovea可以将渲染所需的计算资源减少多达10-14倍,而人眼无法注意到任何图像差异。该系统能够对用户注视的区域进行密集采样,并实时有效地生成丢失的外围像素,不会出现保真度丢失的情况。DeepFovea的意义在于通过注视点重建来提高AR和VR的渲染效能,这对于将沉浸式体验带给更多设备非常重要。随着AR和VR应用不断发展,视线识别技术如DeepFovea将发挥重要作用。Facebook已经将DeepFovea的源代码托管至GitHub,并发布了完整的论文介绍。
Facebook研发AI注视点渲染DeepFovea,为一体机VR大大提升渲染效能

HTC Viveport总裁Rikard Steiber宣布年底离职

根据福布斯报道,HTC Vive port总裁Rikard Steiber将在今年底离职。Rikard Steiber在Twitter上分享了福布斯的报道,并在邮件中表示他将从今天开始休假,直到明年初的四年合同结束。Rikard Steiber曾在谷歌担任全球营销总监,在2016年2月加入HTC。他表示,与Viveport团队一起开拓了全球60多个市场,并对Viveport会员订阅服务感到自豪。

安全工程师称已破解Oculus Quest Root权限

Oculus Quest的Root权限破解项目被推特用户@GarnetSunset展示出来,并@了Oculus官方推特账号。该项目称为"Quest Escape",代码托管在Github上,但尚未公开完整代码。所有代码由Github用户@adc创建。 该推特附带了两张图片,其中一张显示了Oculus Quest的Root权限信息。这意味着用户可以绕过设备的限制,以获取更高级别的访问权限,从而可能在设备上运行未经授权的软件或修改系统设置。 Oculus Quest是一款独立式的虚拟现实头显,无需连接电脑或游戏主机,可提供高质量的虚拟现实体验。然而,对于许多用户来说,Root权限的破解可能提供了更多自定义和控制的机会。
安全工程师称已破解Oculus Quest Root权限

AR/VR行业兵家必争之地(下)-眼动追踪技术大全

根据以上所述,几乎所有AR/VR领域的顶级公司都在开发眼动追踪技术。然而,中国科技公司在眼动技术方面的布局相对较弱,全球眼动追踪技术仍处于起步阶段,需要大量的技术迭代。作者认为,优秀的眼动追踪技术需要与光波导元件和显示光学方案相结合,才能获得更好的效果。眼动追踪可以提供波导显示器更好的显示效果,而波导则可以提供更高的追踪精度。天蝎科技吸收了全球眼动追踪技术的优点,并提出了一项利用眼动追踪技术的专利,希望与中国的AR智能眼镜制造商和波导镜片制造商合作。此外,天蝎科技还拥有大量基于眼动追踪应用软件的AR眼镜商业模式专利,可以完善AR眼镜硬件公司的战略布局。最后,作者感谢映维网为中国AR/VR行业提供的专利资源,让创业者有机会接触顶尖公司的技术。本文介绍了两种利用眼镜反射光强度进行眼动追踪的技术方案。第一种方案是利用视网膜反射光强度进行眼动追踪,该方案由Facebook提出。其基本原理是通过红外光发射器和光敏传感器阵列将红外光引导至眼睛,并通过分析反射光最大强度来确定眼球的注视位置。第二种方案是利用角膜顶点处的反射光强度进行眼动追踪,该方案由加拿大Adhawk提出。该方案通过使用MEMS扫描镜和光敏传感器,将二维的扫描路径转化为一维的时间来计算眼球的注视位置。相比于利用图像计算进行眼球追踪的技术方案,这两种方案计算量更低、硬件成本更低,并且更适合轻便和低功耗的AR眼镜设计需求。微软也是MEMS眼动技术的拥护者,其已公开了多项与MEMS眼动技术相关的专利。MEMS技术具有体积小、重量轻、功耗低、可靠性高、灵敏度高、易于集成等优点,是微型传感器/驱动器的主力军,正在逐渐取代传统机械器件。捕获眼睛影像法是一种眼动追踪技术,通过内置摄像设备捕获眼睛的图像,用于追踪眼球的运动。在AR/VR眼镜中,通常会使用瞳孔角膜反射法来实现眼动追踪,通过计算角膜中心和瞳孔中心的连线来确定注视点。另外一种方式是利用光波导传输眼睛影像,光波导可以将眼睛的反射光影像传导至摄像头,实现眼动追踪。在AR智能眼镜中,为了解决光学路径设计的挑战,可以使用反光镜或光波导来改变光学路径。其中,反光镜适用于VR眼镜,而光波导适用于AR眼镜。光波导是一种通过全反射将光线导引的光学元件,它可以在眼镜内部传导眼睛的影像光,以实现眼动追踪。这种光学方案可以使AR眼镜更小、更轻,并且保持较低的重量和更大的视场角。AR眼镜中的光波导技术能够隐藏摄像头,收集眼睛正前方的影像,避免边缘收集并提供设计空间。
AR/VR行业兵家必争之地(下)-眼动追踪技术大全

MixCast为VR游戏提供一站式MR视频制作解决方案

虚拟现实(VR)的发展引起了市场的关注,然而,要向观众解释优秀的VR体验并不容易。对于创作者、街机店运营商和头显厂商来说,他们需要解决如何向观众展示VR体验的问题。混合现实捕捉是解决这个问题的方法之一,它可以在VR体验中录制真人并记录虚拟元素的场景,然后将两者融合在一起,给观众呈现真实人类与虚拟世界交互的影视内容。要实现准确的体验展示,混合现实捕捉需要一系列工具并克服技术挑战。例如,需要确保录制玩家的真实摄像头和数字虚拟摄像头位置和角度对齐,以及控制器和虚拟对象对齐。另外,为了更好地展示虚拟场景,可以使用绿幕技术或深度摄像头来替代玩家的真实环境。MixCast是一种混合现实捕捉的一站式解决方案,可以帮助简化设置混合现实捕捉系统的过程,并支持绿幕和非绿幕混合现实捕捉。它还具有实时查看混合现实体验和分享VR体验的功能。
MixCast为VR游戏提供一站式MR视频制作解决方案

Ubiquity6推出3D扫描、编辑、共享平台Display.land

增强现实(AR)和计算机视觉公司Ubiquity6最近推出了名为Display land的AR应用程序及创作社区。该应用程序允许任何人将现实世界的物理空间转化为数字环境,进行创意的自我表达。用户可以利用智能手机摄像头捕捉环境,并在共享的数字空间中进行重建。Display land内置了编辑工具,用户可以使用这些工具构建和发布沉浸式作品,包括交互式建筑注释、空间相册和动画场景等。用户可以通过移动设备、PC和VR设备的Web浏览器访问相关URL来查看这些作品。Ubiquity6使用移动视频、智能手机运动和GPS传感器的技术,可以在世界任何地方实时创建逼真的3D场景。Ubiquity6的首席执行官表示,Display land是世界上第一个与现实世界成1:1比例的用户生成的虚拟空间目的地,用户可以在其中分享并学习全球各地的文化。Ubiquity6的技术突破包括实现长时间持续存在的大规模共享AR体验,通过使用机器学习技术来确定手机及其周围环境的位置。
Ubiquity6推出3D扫描、编辑、共享平台Display.land