声音的虚拟现实播客 我叫菲利普·伦恩 我是新认知公司的CEO 一家创业公司 我们已经经营了6个月了 我们在虚拟现实领域的工作是，我们开发了一种在很高帧率下实时捕捉世界的过程，以逼真的摄影现实主义呈现在虚拟现实头戴设备Oculus Rift中。现在，这真的很棒。是的，我们刚刚展示了一个名为《崛起》的演示，你身处在一个仓库，一个大型工厂车间中，并且你能够真实感受到空间的巨大规模，你有一些冻结的演员，你在这些场景之间切换。但是，你到底是如何创建这个环境并将其放入虚拟现实中的呢？是的，这实际上是一个相当复杂和完善的过程。这个过程是由我的合作创始人Scott Metzger开发的。Scott在过去的15年里一直在视觉效果行业工作，并且通过他参与的几部商业影片开发了这个过程。这个过程的完成是这样的，我们使用高分辨率摄影进行拍摄，可以以多个曝光度捕捉到每一平方英寸的高分辨率照片。然后，我们使用一台激光扫描仪， FARO激光扫描仪，来捕捉整个环境的点云，这是一种用于制造业的技术，可以以亚毫米的精度捕捉激光扫描仪在360度圆圈中每个点击中的点。然后，我们把这个点云建立一个三维网格，然后在上面投影照片。然后，我们开发了一些非常特殊的实时着色器，使整个过程可以以非常快的实时速度运行，最高可达每秒100帧，甚至200帧。当您将一个摄像机放置在一个地方并使用激光摄像机进行捕捉时，您会遇到隐藏在这些物体后面的遮挡问题。因此，在这个演示中，我看到了一个相机，它处于一个位置，你可以四处看，但是你是如何处理遮挡问题的呢？你是否能够实际上创建一个完整的3D空间模型并在其中移动？是的，实际上，你所看到的《崛起》演示是我们试图创造一个故事情节与之相关联的演示。所以，我们实际上将你放在了你移动的那些摄像机位置上。环境本身实际上没有被遮挡。它是一个完整的环境，在一个360度的空间内。所以你实际上可以通过按键的方式在其中移动。我们只是在那个演示模式中展示了它。所以，如果您想使用一个PlayStation控制器的交互版本，在其中可以自由移动，我们也可以做到。所以我们实际上已经详细捕捉了环境，使用激光扫描仪确保我们在任何地方都没有遮挡。我明白了。这是一台激光雷达扫描仪吗？是的，这是一台激光雷达扫描仪，FARO的技术。这是这台激光雷达扫描仪的一个商业可用的现成产品，我们使用了三到四个不同的工具来处理所有这些数据。在这个过程中，每个工具都有它特定的工作，所以要按我们的方式进行处理需要一些应用程序的技能。那么，当你把所有东西都拼接在一起时，这个过程叫什么？它被称为摄影测量学，这个术语通常被使用。尽管摄影测量学几乎总是应用于这个过程的自动化，但我们实际上正在进行一个相反的摄影测量学过程，因为我们正在使用非常具体的高动态范围图像，高分辨率图像，并自己构建几何。所以我们不使用捕捉来构建模型。这个过程你们计划商业化并使其更广泛地可供人们使用吗？还是 我们是一家商业公司。所以我们目前的兴趣实际上是利用这个手动过程进行服务工作。在这个过程中，我们有一个开发团队正在开发一个能够以更加高效的方式进行这个过程的应用程序。作为来自特效行业的人，我很好奇您是否看到特效公司从电影行业转向虚拟现实？嗯，这是一个肯定会发生的事情，如果你问任何Oculus的人，他们一定会这样回答，当然，他们都会这样做。而且显然，实时和电影之间有一个逻辑的碰撞。只有现在有足够的硬件处理能力、足够的技术、足够的技能、足够的知识，才能实现实时和电影级视觉效果质量资产的融合。所以很明显，会有一个很大的动向朝着这个方向发展，我们希望引领这个方向并建立一个为每个想要使用这个技术的人提供的软件工具。那么，您使用虚拟现实的这种特定应用的目标市场是哪些？当然，零售业是其中之一，电影预告片将是另一个，第三个是一些很难接触到的物体，我们称之为高价值物体，比如那些你无法接近的高价值大型博物馆藏品。我明白了。是什么原因促使您开发虚拟现实？嗯，你知道，在创建Neuralize之前，我一直在计算机图形业务上工作了二十多年了。我是2003年创办的一家名为Bunk Speed的公司的首席执行官，我们专注于为汽车和工业设计界提供高端实时光线追踪和实时渲染。那时，我公司的重点是使其非常简单易用。在第一次看到Oculus之后，对我来说，这是计算机领域25年来最重大的突破。对我来说，这是计算机领域发生的最重大的事情。非常好。最后，您对虚拟现实的发展有何看法？您认为接下来会发生什么？如果您读过《阿凡达玩家1号》这本书，它基本上为虚拟现实的发展提供了一条路线图。我完全相信，对于许多人来说，Oculus或者类似这样的虚拟现实头戴设备将取代日常工作中的显示器。如果它取代了您的显示器，那么您将需要填充一个非常大的空间。你填充它的方式，我们希望能在其中提供帮助。Fill it with what is really where our interest lies.因此，对于数以百万计的人来说，我相信它将取代你的台式显示器。如果你是一个股票交易员，你可以用活动直播填充20个显示器，你可以在背后拥有一个IMAX影院，并在面前有一个桌面以及您女友、妻子或朋友的3D扫描，甚至你的孩子坐在你旁边，甚至是你的狗的3D扫描坐在你的桌子上。你基本上可以重建一个环境，即使你实际上在一个8乘8的无窗小房间里工作，你可以身处纽约索霍协奏厅（SoHo）的一所顶层公寓，俯瞰哈德逊河。你知道吗？所以，对我来说，这就是它的酷之处。它真正让你能够创造一个环境，这是一个你可能永远买不起的梦想环境，但你却可以拥有这个超高分辨率的、超丰富的沉浸式空间，你可以在其中生活和工作。你们有计划环游世界，将各种异国风情的地方放入其中吗？有趣的是，我们刚从日本回来，捕捉了一个非常高端的零售场所，非常令人兴奋，迫不及待地想展示一下，这样我们就可以实时交流了。但是，是的，我们认为将会有很多旅行，捕捉真正的异域风物是我们工作中非常精彩的一部分。那里还似乎有一种创造不存在于现实中的东西的成分，你们是否也会开始创造这样的新世界？嗯，你知道，在我们的过程中，这更多地是在幻想的层次上。显然，由于我们在计算机图形、视觉特效和电影渲染方面的经验，我们当然可以创建任何看起来非常逼真的世界。但是，我们主要关注的是捕捉现实。你知道，捕捉已经存在的东西。所以，一个新的建筑物建成了，让我们去捕捉它。让我们进入古根海姆博物馆的内部，你可以实际走进那个古根海姆博物馆，看到那里的艺术品。所以，在某种程度上，你知道，现实捕捉是我们追求的目标的一部分，但我们当然也可以做一些只存在于幻想中的东西。太好了。谢谢你非常感谢你。非常感谢。