/ Roadtovr / 0浏览

Facebook公开源发布DeepFocus算法,以实现更逼真的可变焦距虚拟现实渲染。

DeepFocus是Facebook的AI驱动渲染器,据说能够实时产生自然的模糊效果,这与明日的可变焦显示技术息息相关。今天,Facebook宣布DeepFocus将开源;虽然该公司的宽视角(FOV)原型“Half Dome”可能是专有的,但他们的深度学习工具将“硬件无关”。

当你将手伸在面前时,你的眼睛自然地会汇聚和适应,将你的手带入焦点。然而,今天的虚拟现实头显并没有提供与此相同的体验,因为光源来自固定位置,导致你的眼睛过度努力以解析近域图像。这就是可变焦显示和眼动追踪的作用所在,使得一度固定的焦距能够根据你在任意时刻的视线所指位置而变化。

基本上,这将使你能够专注于物体,无论它们与你的距离如何,从而使整体体验更加舒适和沉浸。但是,在这个谜题中缺失的一部分是头显也能够复制自然的看似模糊的虚化效果,即当你专注于你的手时,背景变得模糊。这就是DeepFocus的作用。

在SIGGRAPH Asia 2018上发表的一篇研究论文中,该公司表示DeepFocus受到“越来越多的证据表明视网膜模糊效果在推动调节反应、深度感知和物理真实感方面的重要作用”的启发。

与用于基于深度学习图像分析的更传统的AI系统不同,据说DeepFocus在处理视觉效果时保持了超高清图像分辨率,这对于高质量VR至关重要。

这意味着在可变焦VR头显甚至具有光场显示的AR头显中,事物看起来不仅更加逼真,而且还能减轻与调节-适应冲突相关的眼部疲劳。

Facebook的研究人员表示:“利用常见的RGB-D图像,这个网络能够准确地合成虚化模糊、成像序列、多层分解和多视点图像,实现对视网膜模糊的实时、准确描绘,同时支持各种调节支持的头显(HMD)。”今天,Facebook将发布源代码和神经网络训练数据,“供开发新的VR系统的工程师、视觉科学家和其他研究感知的研究人员使用”,该公司在一篇博客文章中表示。

在Oculus Connect 5上介绍DeepFocus时,Facebook Reality Lab的首席科学家迈克尔·阿布拉什表示,Half Dome和DeepFocus只是“光学和显示的起点,它是进步加速的楷模”。

0

  1. This post has no comment yet

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注