Voices of VR Podcast
导语
大家好,我的名字是Kent Bye,欢迎收听《Voices of VR》播客。今年我在圣丹斯电影节的New Frontier展区看到的一些最具技术复杂性的体验之一是彼得·弗拉赫提的《The Dial》。这是一种基于手机的增强现实体验,桌子上有一座空白的白色房屋,房屋上通过投影映射显示基线内容。使用手机增强现实技术,你可以看到其他的植物、3D模型和运动捕捉的演员在这场戏剧中逐渐展开。此外,这个体验的控制由不同的观众来进行,有三个人,其中两个是乘客,一个是导航员。导航员基本上是逆时针走动以控制时间的展开,从而影响故事的不同序列。与此同时,你也佩戴着骨传导耳机,通过下颚将对话传送到你的身体,而你的身体则以声音的形式听到。不过,它们也有四声道混音。当你与他人共同体验时,你可以选择和他们开放地谈话。因此,从技术上讲,这个体验增加了很多不同的元素,如增强现实投影、互动叙事以及这些数字现实的层次,似乎神奇地融汇于你的大脑之中。而更重要的是,他通过这些桌面沉浸式戏剧技巧讲述这个互动故事。我有机会与彼得·弗拉赫提讨论了他在实现这一切方面技术上所做的努力,以及他对空间叙事、增强现实和与投影映射、增强现实及沉浸式戏剧等技术相关的沉浸式叙事未来的看法。所以今天的这集《Voices of VR》播客将涵盖所有这些内容及更多。
与彼得·弗拉赫提的对话
这次与彼得的访谈发生在2019年1月25日,圣丹斯电影节在犹他州的帕克市举行。那么,我们马上开始吧。
彼得·弗拉赫提:我的名字是彼得·弗拉赫提,我是《The Dial》的导演。我在增强现实领域工作,并在这个项目中做了投影映射和互动叙事。我的背景是为大型表演和艺术装置内的表演设计互动和投影,主要是分析性能和交互性。过去五六年来,我一直生活在这种表演艺术的混合世界中,同时也涉及VR和AR。
关于《The Dial》的讨论
所以,是的,我今天下午有机会在New Frontier区体验《The Dial》。桌子上有一个房屋,上面有投影映射。通过增强现实手机观察这座房屋时,我还看到了许多数字角色参与其中。但我发现,通常在观看增强现实项目时,我只是集中在那个窗口的整体场景中,但因为我在旁观的视野中可以看到这个投影映射房屋的整体上下文,所以这对我大脑产生了奇怪的影响,可能让我比完全数字化的内容更能相信它。也许你可以谈谈这一点,关于数字世界和现实世界界限的模糊,以及你作为艺术家如何看待这一线索。
彼得·弗拉赫提:我认为这是个很好的观点。当我们首次启动这个项目时,我在构思过程中认为投影映射和AR这两种数字媒体就像一个魔术。它们在创造中使用一定程度的幻觉,因此依赖于现实世界为这种幻觉创造基础。因此,结合我们的房子和桌子,虽然我们是用木材构造的,但通过投影你创造了规模和维度的幻觉,以及所有其他细节。这也适用于全息影像。我们依赖于现实世界来创建他们存在的基础,然后他们的维度和规模及与事物的关系创造了现实的伪装并赋予它们实质性和在我们的世界中的位置。这两种形式的结合是丰盈的,因为你可以同时看到全景和细节。并且,可以看看像AR这样的基于屏幕的媒体(光是发射的)如何与投影映射(光是折射的)结合在一起。我们在2018年2月第一次做的概念验证中,还没有角色,只是一个粗糙的泡沫模型,搭配几只投影仪。我觉得这两个东西完美融合,因为它们是两种略有相反的数字层,但它们的结合创造了一个极具吸引力的整体幻觉。
项目的未来计划
我在想你对这个项目未来计划的想法,因为我们在一个节日里,你有这个房子,这个投影映射。有很多不同的后勤和基础设施才能看到这个体验。但因为这是基于手机的AR,问题来了:这能否有一种方式让任何人都能观看?我很好奇你对此项目的未来走向。
彼得·弗拉赫提:是的,我一直在考虑未来能够下载的计划,期望能够再参加几个节日,也希望能够进一步构建一些动画和互动场景。我感觉我们现在处于一个良好的位置,但和大多数项目一样,我还有很多关于其他方面的想法,可以纳入其中,这样会对叙事弧线很有趣,并且增加更多的“彩蛋”,供乘客体验的附属b故事等。所以我希望未来会有一系列的节日或某种基于位置的体验类型,然后我们将所有的数字资产下降到一个家庭体验中,您仍然可以获得所有互动叙事组件,比如在您的餐桌上移动这个故事,在其中移动并决定故事如何展开,您也可以选择重新播放,以不同的方式进行体验。我希望没有排队或等待列表的概念。 我很喜欢这个想法,因为即使是在节日上体验过的人或者只是待在家里的人,也能下载并以这种方式玩这个体验。我将这一视作下一个阶段。
观众的观看角色与互动体验
也许你能给我描述一下人们如何观看这件作品的后勤安排,因为有3个人同时观看,其中有一个导航员和两个观众。我想了解这两种不同的角色以及三人一起观看这部作品时的互动体验。
彼得·弗拉赫提:我想可以。也许我可以先把框架设定得更大一点,我觉得这个体验通常有三种阶段,朝向真正参与者的状态。第一个你进入房间时的全景安装艺术是一个发光的立方体,正改变颜色,你不知道为什么。然后当你接近它时,在立方体中心有一个带状窗口,允许你看进去,看到其它参与者与AR手机互动,围着桌子走动并穿梭其下,玩得很开心。然后你抓起手机成为参与者,这是第三阶段。这个想法是如何创造一种社交多参与者体验,让人们能够享受我发现最吸引人的AR乐趣,即我们能进行眼神接触,理想情况下能够互相听到,这样可以听到彼此的反应,或说“哦,哇,让我们去做这个吧!”所以我们想到了使用这一种骨传导耳机来传递对话,同时保持空间音效。我想当然可以有三个人的作品同时互动,但我们在这一开始时进行了一位导航员的实验,他可以穿越故事,这是唯一能驱动投影的角色,因此这在时间上当然只能同时呈现一件事。因此,我们设置了两个乘客角色,基本上是一路随行的。我们在工作室进行更多实验时收到了反馈,参与者普遍表示他们喜欢乘客的角色,因为不同于导航员,他们不需要停留在正在观看的场景中,可以自由围着桌子走动,从不同的角度欣赏这个场景,完全自由地移动。虽然在体验中他们的控制感没有导航员那么强,但能够从不同的角度观察和享受整个故事,比如观看那一幕时,可以选择围绕那一幕不同的场景进行重构,体验两位邻居在石墙后藏匿的视角。这使得我们认为这两个角色的体验中都有乐趣。
总结与展望
正如我在上面讨论的,彼得通过《The Dial》展现了一种全新的叙事形式,使我们在参与体验的同时,不仅感知到数字与现实世界的交汇,还启示我们重新认识环境。增强现实的运用让人们的思维更加开放,人与环境之间的互动愈发紧密。这种新媒介的运用将在未来的叙事桥段中扮演重要角色,能够让观众在体验中不仅感受情感共鸣,还能引发深入的思考。这是一次关于技术与艺术、现实与虚拟交织的对话,而正是这种对话让我们在探索叙事可能性时,将彼得的观点带入了我们生活的不同层面。