The Voices of VR podcast 我是保罗·雷诺兹，魔幻跃迁的高级技术总监。在魔幻跃迁，我们正在为人与技术互动提供一种全新的人性化方式。我们最近在新闻中频频亮相，谈论的是将虚拟内容置于现实世界中的能力。我们坚信，我们所看到的现实是我们大脑模型制作功能的结果。基本上，我们的大脑是你将拥有的最高分辨率渲染器，这个渲染器接收许多输入，包括光场。所以，我们的眼睛所做的一切实际上就是扫描光场，为我们的大脑创建有助于渲染我们所看到的信号。因此，我们觉得，如果我们能够创建一个数字光场，它在处理现实世界时与我们的大脑类似，那么我们就能够发挥大脑的模型制作功能的潜力，基本上就进入到了梦境之中。能够以如此自然的方式输出是令人难以置信的工程挑战。我们既要做到这一点，又要推广商业化，制造设备并开发一个生态系统，为这种光场技术创造内容。我的职位是高级技术总监，我在内容组中工作，处于工程工作、开发者生态系统和内容开发的交叉点上，以最大程度地利用这项技术。
最近，你们发布了一系列不同的招聘信息，寻找各种岗位，从软件到硬件的职位。或许你可以介绍一下你们在寻找什么样的职位方面有哪些亮点。
是的，魔幻跃迁是一个非常有趣的工作地方，特别是从工程角度来看，因为我们有非常复杂和多样的工程努力。你会看到招聘光学、光机械、嵌入式软件（固件和驱动程序）、机械工程、感知和机器学习等职位。各种岗位都有，我们实际上有真正的火箭科学家在我们的团队中工作，他们甚至说我们所做的事情比发射火箭还要复杂，这有点有趣。但这意味着我们所做的一切，因为我们将虚拟内容放入现实世界，所以我们所做的一切都是实时的3D。因此，公司的哲学是，一切都必须高度互动、活跃和实时3D。最有经验的一群人就是视频游戏开发人员。我的背景是视频游戏，我在视频游戏行业有超过15年的经验。我们还相信，游戏有助于推动所有API和技术的发展，因为游戏必须具备高性能、互动和美观，这是一件非常困难的事情。所以你会看到各种领域的疯狂的工程工作，我们是一个整体的扩展公司，今年在各个领域都在大规模扩张。所以非常多样化。我甚至看到了一些云工程师和Unity开发人员。所以是否可以说Unity是你们的主要平台？你们是否也在尝试与虚幻引擎进行整合？或者，因为这是面向游戏受众的，你明确提到了Unity。是的，我不会说我们有一个特定的主要平台，我们基本上希望尽可能支持第三方开发。作为来自游戏行业的人，我希望我们提供一个对现有开发者来说尽可能友好的开发者生态系统。我们希望支持所有现有的游戏引擎。有些引擎可能有更好的集成，只是因为它们更受欢迎。但我们目前的架构确实希望能够让任何已经存在的游戏引擎或任何技术的投资都能够使用。我们不希望对此封闭。有一个混合现实的谱系，从完全沉浸式虚拟现实到增强和虚拟现实的混合，再到增强现实，然后到完全没有增强的正常现实。你如何看待并理解这个从虚拟现实到增强现实的混合现实谱系？是的，我们对VR中正在发生的所有进展非常兴奋，因为那实际上也对我们有好处。我认为AR被任何人都不认为是沉浸式的，这是不公正的。你知道，我可以亲身证明，通过光学视图的体验可以非常沉浸。我认为总有一些事情在虚拟现实环境中表现出色，你想把某人带到一个完全不同的世界，反之亦然。它们都有各自的优势和劣势。在现实世界中集成一些更酷的事情是一个有趣的问题。特别是如果你想从游戏开发的角度来考虑，一些经过多年发展的游戏机制已经在监视器的框架中成功经受了考验，而现在我们正在VR中进行实时3D整合。它们是否能够直接转移过来，或者我们需要把它们的乐趣要素进行总结，然后如何重新发明和创新这个平台上的这些事物？所以有一些挑战，还有一些根本没有在2D屏幕上好好呈现的东西。对于一些这些游戏和机制来说，它们应该存在在这个新的平台上。所以我认为两者都有取舍，两者都有各自的优势。如我所说，当前正在发生的所有技术创新和用户交互探索对整个市场是有益的。对于这些新事物，我感到非常兴奋。是的，你知道，在这个谱系中，你认为魔幻跃迁处于什么位置？我知道它被标签为增强现实，但你也说它是一种不同的东西，比如电影式现实。所以你是否认为魔幻跃迁是一种增强现实？嗯，从纯粹的角度来看，我们的光场被整合到了真实世界的光场中，所以我们觉得我们实际上是在实现过去几年增强现实梦想的一个方面，我们对此非常兴奋。我认为我们正在实现它。是的，这是虚拟内容放入真实世界。你知道，如果我必须选择其中一个，我们肯定是在整合到真实世界这个整体上，我们肯定是在那一边。但我们也觉得这是一个更难解决的问题。对于性能、保真度和技术来说，让内容牢固地定位在真实世界光场中是非常困难的。所以我们觉得，这可以为虚拟现实体验创造一个真正很棒的体验，你知道，同样的技术，因此我们一直试图定义这整个新的事物，因为我们认为它是一个全新的事物，它受到了过去所有这些的愿景和梦想的启发。在2018年IEEE虚拟现实会议上，他们在增强现实和虚拟现实之间的谱系上有一张幻灯片。他们说随着接近虚拟现实的末端，更多关注的是将用户带入另一个世界的存在感，而在增强现实中，你在现实世界中存在着，在这种情况下你不需要重新创造你的虚拟身体。所以你会说魔幻跃迁是否有能力进行完全沉浸式的虚拟现实体验呢？是的，我的意思是，通过更好地理解感知系统并呈现自然光场，我们当然有能力做到这一点。我们的焦点是将虚拟内容放入现实世界。虽然我们也谈到了存在感，但那是一个被重复使用的术语，因为对我们来说，当我们谈论存在感时，我们的一个巨大优势就是虚拟内容感觉就像在那里一样，与其说感觉像你在另一个地方，不如说感受到它的存在。你可以感受到它的质量、规模和相对于你的位置。这就是在艺术中的存在感。特别是在近距离范围内，存在感非常强烈，通常在视频游戏类型的东西中，随着物体离你越来越近，它们开始崩溃。其中之一的优势是，所以当你看到虚拟内容真的很近，感觉它更像是在那里，而不是变得更模糊或更低分辨率，所以，是的，我们确实提到了存在感，但它的概念完全不同。所以，当我们有了这个能力，你能否完全占据你的整个视觉领域？我想这就是增强现实和虚拟现实之间的区别，因为你仍然能看到真实世界，而虚拟现实是把你带到一个完全不同的世界。那么它是否有能力完全占据你的视觉系统，并让你相信你在另一个世界中呢？从技术角度来说，它当然有这样的能力。从我们试图实现的目标来看，我不认为这是我们想做的，因为我们发现，当这个东西出现在你的真实世界中时，你会有一种更神奇的体验。基本上，我们的感知系统对真实世界非常敏感。你试图完全占据那个领域，很容易就会遇到尴尬的境地。所以，你知道，我们已经发现了能够生成一种非常自然、被感知为自然的光场的方法，我们从大脑给予的正确信号中获得了许多好处。因此，我们的焦点绝对是将魔力带入你的真实世界。这是我们的强项。我认为，是的，但从技术上讲，我们的技术能力肯定可以做到这一点。但我认为，目前我们并不真正在考虑这个问题。我明白。是的，这很有道理。我发现，最沉浸式的虚拟现实体验实际上是那些像低多边形的。因为你有很多投射的能力，而你的大脑接受得更多。当它更接近现实时，你开始排斥那些小差异，因为它们不完全到位。所以听起来你们能够通过将对象置于现实中来做到这一点。那么对于这种电影式现实体验，我想知道你们内部使用的是什么，如果不是虚拟现实中的存在，那是什么？对于你们来说，创建一个成功的电影式现实体验的最终标准是什么？对我们来说，真正成功的时刻是当有人可以自然而然地接受虚拟物体真的就在房间或他们的空间中，而不是谈论它是如何渲染的或者它在哪里的技术细节，而只是随意地说着龙在这里，想要它做什么之类的事情。对我们来说，那才是你不再抵触，而是兴奋的时刻。人们不再考虑这项技术，它就是他们世界中的魔法。我们不谈论光子和像素，我们谈论的是这个物体，我现在拥有这种神奇的能力，可以在房间里放任何我想要的东西。对我们来说，那是一个交叉点。它也与存在感相联系，当你觉得这个东西就在你的身边时，你就会感到存在感。是的，就像这个东西在你的现实世界中。对，对。关于谷歌眼镜，你知道，人们在公共场合佩戴它，它有一个摄像头，可以在没有他们完全同意的情况下将其他人的生活广播到网络上。我认为我们看到了很多人对此表示强烈反对，因为它侵犯了其他人的隐私。虚拟现实似乎通过…你知道，AR更多是一种私密体验。但是使用AR，你在世界中使用它。所以我想知道，你们认为AR在投入广泛使用之前是否需要成为一种私密体验，还是它需要在释放到主流社会之前展示更多的价值。所以我真的很自豪，因为在公司内部，我们非常注重这些隐私问题，这也是我们在很多方面非常小心的原因之一。从我的角度来看，有两个主要的隐私问题，一个是用户个人数据，另一个是他们周围的人的数据。我认为我们无法控制用户去哪里，所以我认为我们必须假设他们会在公共场所。鉴于此，我们要确保我们对世界的任何感知都是在符合道德的前提下进行的，我们不会获取比需要的更多的信息。任何我们为该用户获取的数据都应该是透明和可访问的，我们要给他们对此有一定的控制权，基本上这是他们的数据，这是我们的看法。所以为了使虚拟内容更好地融入到现实世界中，你需要了解更多的关于现实世界的信息，包括感知和环境。所以这个问题是，这是否会让体验变得更有价值，是否值得获取这个更多的可能是私密的数据，以使体验更加神奇？在这些界限上，给用户访问和控制权，我认为这是更好的方法，而不是试图限制使用。我们确实感觉自己正在重新发明人类与技术的互动方式，并且我们希望这种互动可以在全天候、无论身在何处的基础上进行。所以我认为现在尊重、意识到并且对待数据是更好的方法，而不是忽视数据，只是试图创造最酷的东西，然后不得不事后强制保护隐私等方面的事情。所以我对我们对此问题持有敏感态度感到非常高兴。除了像在公共场合佩戴这些东西之类的时尚问题以外，还有什么使你最兴奋的3D用户界面的未来？老实说，最令人兴奋的事情可能是我们熟悉的用户界面可能会消失。我认为图形用户界面和鼠标键盘使技术变得更容易被人们接受，触摸屏也是如此。你知道，移动触摸屏使这些东西更易于使用，但是二维平面的交互存在一定的局限性。所以我真的很喜欢这个想法，最好的用户界面不是一直在你的面前的界面，只有当你准备好与之交互时，用户交互才会发生。所以在我们的设计中，我们不希望它像时报广场一样一直在你面前，这时如果你不使用它，它就不会出现。这正是魔法的一部分，它渗透到我们所创造的体验之外，成为与技术的实际互动，你知道，当你需要它的时候，它就在那里，当你用完它之后，它消失了，这是一种自然的互动方式。我认为这将是最令人兴奋的事情，因为我出生并成长在现代网络和搜索的蓬勃发展时期，我可以说我对Google搜索相当擅长。当我需要研究或学习什么时，我可以迅速深入。但是，你知道，这有点回到我们本周博客中谈到的“妈妈测试”。如果她有一种更直观的方式来获取这种搜索力量，我认为一切都会加速。从根本上改变我们以一种完全不同的方式访问技术的方式，这对我来说是最令人兴奋的事情，可能比用户互动的角度更高级一些。所以我们正在进行大量的探索工作，因为它确实是个变化。关于VR受到科幻小说的启发，你提到了Snow Crash作者Neal Stephenson加入Magic Leap担任首席未来主义者这一点，或许你可以谈谈Magic Leap如何使用一个虚构科幻作家的远见技巧并转向非虚构作品，他如何帮助塑造他二十多年来一直梦寐以求的技术。是的，我很幸运能够参与尼尔加入公司的过程。他非常踏实和全面参与。与他交谈时你会注意到的第一件事是他非常慎重地选择用词。所以当你与他交谈时，他会暂停下来思考，然后再说。我们第一次一起吃饭时，我们的首席执行官Roni基本上说，你是元宇宙的人，所以我们可以以多种方式合作，其中第一种就是你已经构想出了这个未来。你可以成为我们的“哲学导游”。尼尔想了一下，像他平时做的一样，然后他说，我更希望制造东西。他说，我不想成为一个头上棒着的东西，我实际上想在这方面创造东西。他绝对是首席未来主义者，但他非常实际。他有一整个愿望清单，他想用这项技术创造一切。第二天我们带他进来并向他展示一些东西，他要求我们的一个工程师为他拆开一个东西，以便他能够看到里面的电子元件，他对此非常感兴趣。所以我认为尼尔更多的是通过实际制作东西来指导我们，而不是我们向他咨询或类似的事情。但是，是的，他的写作对我们影响很大，与他讨论这些事情有时候确实有一种超现实的感觉。但他非常激进。你提到了元宇宙。他有点因创造了这个术语而出名。但它似乎暗示完全沉浸式虚拟空间之间的互联互通，有点像互联网。在某种程度上，增强现实似乎会与更多的地理联系在一起。你是否认为AR能够提供对元宇宙的一扇小窗户？或者你能否谈谈你如何看待增强现实与元宇宙的关系，或者你是否认为增强现实将成为虚拟现实的独家产物？嗯，这个问题有争议。我们非常注重将虚拟内容放在现实世界中。当虚拟内容尊重物理世界的约束时，最神奇的事情就会发生。例如，如果我在房间里飞过一只龙，如果那条龙不穿过或飞越任何真实的东西，但它也不是一种限制性的力量。所以我们可以利用我们超越物理世界的事实。一个例子是，如果你和我在同一个房间，我们共享一个电影般的真实体验，比如我们在桌面上玩的虚拟游戏，我们在现实中共享同一个空间，但是想象一下，它是一个4人游戏，还有其他两个人和我们一起玩，一个人在西雅图，一个人在纽约，所以我们你和我共享的是同一个物理空间，但是我们四个人在共享这个虚拟的东西，他们在各自的物理位置。谁能说谁在真正的地方？这样就开始变得相当荒谬，你知道，对我来说，这就是我对元宇宙的看法，我认为很多人想到的方式是你所描述的，就像你进入另一个维度一样，但是你也可以同样容易地将其视为一种覆盖在我们现实世界上的层次，这取决于我们个人的视角，我们在哪个真实的位置上。不，我认为它不限于VR体验。如果有什么，我认为我们实际上可以将这种元宇宙带到现实世界中。我想问的最后一个问题是，你如何看待影视真实性的最终潜力？就像我在UI思考中提到的那样，能够访问这种技术的力量一直被能够与之交互的寥寥无几的人所限制，以及我们目前的交互方式。所以我认为最终的潜力是将信息、搜索和技术的力量呈现出来，这些力量在我们这一代人的生活中给我们带来了很大的好处，这种呈现方式更自然、更本能，所有人都能够理解。这不需要像现在这样的解释和操作才能让他们能够理解和使用。与此相关，你知道，过去一百年来，我们通过屏幕工作，我认为这将大大减弱，这将把虚拟内容带到我们的世界而不是我们潜入其中。然后，随着这一过程的不断发展，你知道，我有时候使用不同的交互模式。你知道，我可能在手机上做一些事情，但是，哦，我想写一封长的邮件，所以我会去我的电脑上写，或者我想看电影，所以我会坐到沙发上。我们在对待技术时有着不同的交互模式，这将会模糊得多。你将不再因为必须使用特定的技术来做你想做的事情而感到困扰。我认为这是真正改变世界的技术，因为我可以通过互联网获取信息的能力以及我能够对这些信息进行深入挖掘的能力。所以我认为如果我们可以给我更多的访问权限，给更多的人提供访问权限，那将是相当重要的。我认为这是这项技术的最终潜力。非常感谢你今天加入我。不客气，谢谢。