The Voices of VR Podcast
主持人介绍
我的名字是Kent Bye,欢迎收听《Voices of VR》播客。
关于沉浸感的研究
虚拟现实的一个“圣杯”就是能够实现沉浸感的状态。像Mel Slater这样的研究者进行过研究,并总结出要实现沉浸感必须达到两个基本的幻觉:第一是地点幻觉,让你感觉自己仿佛被传送到另一个世界;第二是可信度幻觉,意味着这个世界是有道理的,是连贯的,符合你对它行为的期望。
今天的嘉宾—Kimberly Voll
今天的节目中,我邀请到Kimberly Voll博士,她是Fantastic Contraption团队的一员,并且获得了人工智能博士学位。在过去的20年里,她一直专注于玩家心理学和游戏设计。她对可信度的看法是将其视作与体验者之间需要达成的“保真契约”。今天我们将从大脑的角度来谈论关于可信度的问题。
赞助商介绍
在节目开始之前,先感谢今天的赞助商:《Voices of VR》Patreon活动。这个播客项目起初只是出于热情,但现在已成为我的生计。如果你喜欢《Voices of VR》播客中的内容,请考虑作为对我和广大社区的一种支持,给我一点小费。每月几美元的捐赠会有很大帮助,特别是如果每个人都能出一份力的话。请访问patreon.com/voicesofvr进行捐赠。
采访背景
这次与Kimberly的采访是在8月5日和6日的VR LA大会上进行的,那是在洛杉矶会议中心举行的。
深入交谈
我是Kimberly Voll,Fantastic Contraption团队的一员。在这个项目中,我做了各种不同的工作,包括编程和设计。我的背景多种多样,我的博士专业是人工智能,但我过去近20年一直在研究玩家心理学和理解游戏设计,以及玩家如何处理包括VR在内的各种体验。
太好了!我刚开始做一个关于人工智能的播客,我的过程是,随着你对人工智能了解的加深,你会更深入地理解我们自己的大脑以及它是如何运作的。那么基于你对大脑的这些见解,你认为这与VR有什么关系呢?
首先,并不是很多人会把这两者联系起来。他们总是觉得这是一个很奇怪的路径,为什么你要做这些不同的事情?你说得对,带来这一切的唯一共同点就是大脑。这与VR有着非常自然的联系,因为VR的核心就是创造一种存在感,让你在某种程度上感觉自己身处于另一个地方,同时创造我所称之为“可信的体验”。存在感是一个非常具体的东西,感觉自己在一个空间中,但可信的体验是那种你作为玩家或用户,无论设定是什么,感觉到你的需求得到了满足。
所以你所处的每一个环境都有我所称之为的“保真契约”,它基本上设定了该空间的期望和可供使用的特性。你在某个空间中能够做的事情,是因为这个空间的呈现方式,以及我作为一个人类在这个世界中移动所带来的丰富知识。比如,在这个空间里,我会尝试做出建议我的行为。若我无法做到这一点,那个空间的可信度就会开始下滑。
关于可信度和存在感的进一步探讨
Nell Slater对存在感的概念化提出,存在感包含地点幻觉和可信度幻觉,而可信度意味着这个世界是有道理的、连贯的且可信的。Richard Scarves也对存在感进行了一些研究,他告诉我,他认为“无法实现的谷底”是多维度的,意味着有许多不同的保真维度,无论是音频、触觉还是视觉,选择一种保真度的水平比盲目追求照片级真实视觉要更好,尤其是当音频的质量却不达标时。
我认为这是非常敏锐的观察。我看到很多在这一领域工作的团队,以追求“高存在感”的目标尝试让各方面都做到最好。实际上,我们甚至不完全知道这个巨大的感知混合体是什么样的。显然,视觉线索有影响,第一次沉浸在VR中时,你将体验到“哇!太不可思议了,我仿佛在另一个地方”。但随着你不断体验,所有其他影响你大脑的信号也会逐渐增强,使得视觉线索逐渐减弱,最初的“哇,我在这里”感逐渐消退,而现在你看到这些小细节,你的大脑就会说:“等等,我并不在这里。”这会不断拉扯你出那个体验。
关于感知与印象的破坏要素
很多人普遍认为,哦,必须要达到极高的照片级真实感,因为只有看起来足够有说服力,才能解锁存在感。但事实并非如此。你可以把人吸引到各种有趣的体验中,但就像你所说的,这个世界必须是连贯的,可信的,以某种方式设置好这个世界,才能让我相信。如果你以某种方式作为这个体验的创作者展示给我现实世界中我所期望的物理现象,那么这些物理现象就必须在整个体验中保持一致,否则它会逐渐变得不那么可信。
你可以在卡通世界中做到这一点,甚至可以与卡通物理相结合,只要有一致性即可。那么,你能告诉我更多关于“保真契约”的含义吗?
保真契约的具体意义
当我们进入一个空间时,这个空间有其特有的保真度,包括音频、视觉和体验的不同方面。这种保真度基本上决定了我的大脑如何处理对该空间的期望。例如,如果在空间中有一个箱子,你可以说这是一个箱子,假装它是一个抽屉柜。如果这是一个抽屉柜,我不会走过去尝试打开它,因为对于那个物体没有任何暗示表明我可以通过某种方式与之互动。这个时候所有的互动都是虚构的。但如果你给我一个照片级真实、渲染精美的抽屉柜,而我所在的环境是可以打开柜门和做其他交互的,那么我走到那个抽屉柜前,会感觉当然可以拉开这些抽屉,与其他事物互动。由于这个高度渲染,我会尝试这样做,然而突然它无法实现,这就会把我拉出那个体验。
所以在这个例子中,保真契约被打破了。这对于所有的事物都是如此。你知道,音频线索、各种我们作为这个体验的开发者必须做到的事情,几乎都要进入玩家和用户的脑海,预测他们在这个空间中的思考方式,当然这是几乎不可能做到的,但这是我们面临的挑战之一。
探索AI与VR的交集
我认为,从AI和VR的角度来看一个事物是非常有趣的,因为你开始看到大脑在某些方面的出色表现,以及如何通过AI去复制大脑是多么困难。但通过研究这两项技术,几乎就像在对着镜子看,让我们更多地了解自己。那么,从你的视角来看,通过观察AI和VR,你得到了什么启示和洞见?
在过去的10到20年里,我最大的收获之一就是意识到大脑为我们做了多少事情。这并不是说,我了解大脑工作的所有细微差别,显然,但大脑正在努力创造一致的体验,试图解决认知失调,试图编织叙事,作为记录和分类信息的主要方式,以及模式匹配等等。这些都是我们大脑的硬性构造。当我们创造的体验失败,感觉不佳,要么落入无法实现的谷底,要么令人失望的时候,很多是因为我们试图让它变得太完美,试图将保真度提高到一个无法始终维持的程度,结果我们就会掉进一个用户失望的境地,而我们创造的东西也妨碍了本该由大脑自然完成的事情。
比如说回到那个箱子的例子,看看孩子们,他们是极好的虚构促成者。我们可以围绕这一点创造一条非常有说服力的叙事,并且我们可以参与其中,做各种疯狂而有趣的事情。但是,如果我们将保真度提升得过高,以至于无法维持这一保真度,那么大脑就会开始做各种事情,突然我们就会出现问题,导致大脑停下来说:“等一下,我之前还很好,我这个叙事说得很不错,但现在我能看到这是破损的,现在我再也不相信它了。”我们倾向于通过过度建模我们的世界,导致自己绊倒,无论是视觉上还是听觉上,我们设定玩家感到这将是一个一致的体验,而当事情并不是这样,它就会把人们从那个体验中撕扯出来。
关于用户测试的见解
在GDC和VRLA上,我一直在围绕这些认知科学对虚拟现实的见解进行演讲。那么,在你所做的一些演讲中,有哪些重要的观点?
我认为我能提出的最大观点就是观察人们在你的空间中所做的事情。当人们在VR中时,很难进入他们的思维,预测他们会做什么。在我的VR开发经验中,这一点从未失效,甚至现在我在原型测试新的东西时,总是会惊讶于人们在空间中做些什么,所以我认为从我讨论的所有内容中,任何人都能收获的结论是,我们无法完全猜测。我们只知道一定的感知基本成分,并且我们可以做出一些相当有根据的猜测,但到头来,我们无法预知一切。因此,你需要在其中引入各种各样的人,观察他们所做的事情,这样你才能判断“如果我的环境暗示人们应该打开那些抽屉,而这感觉不佳,那么或许我需要调整我的体验。也许我需要将那些抽屉拿掉或重新渲染它们,或许需要考虑我的体验是如何在坚持引导玩家或参与者的方向。”
玩家体验与反馈
我觉得有一个说法是“顾客永远是对的”,在VR中,或许对于所有互动体验来说,这可以转化为“玩家永远是对的”。在这些体验中,他们在尝试做某件事情,这个世界暗示着他们要做这个事。换句话说,他们在这个情况下拥有的控制感与期望是一致的,他们感受到没有任何人为或不公平的事情阻碍了这一点。
以比如说,如果你把一个玩家放在一个束缚衣中,“哦,我不能动我的手臂。”这还是合理的,对吧?这有趣的叙事是成立的。那么,很多我们观察到的情况,做了大量的游戏测试,发现有两种类型的玩家:一种是从未尝试过VR的人,他们进入VR后,往往会有“哇,太不可思议了,这是一个惊人的体验”的感觉。这是很棒的,我常常谈论VR的笑声:人们进入体验后就会笑,这非常美好,我喜欢这种。然而,对于从未经历过VR的人进行的体验测试是极其具有挑战性的,因为他们是如此震撼,以至于完全沉浸在精彩的体验中,对某些人而言,这绝对是改变人生的体验,他们永远达不到你想要测试的状态。
我看到有许多肤浅的测试,参与者出来时说“哦,太美妙了”,然后我看到开发者们(也就是字面意思)把这个记下来,得出结论:“这很棒。”但他们从未真正尝试过这个体验。这并不意味着他们没有过一个很美好的时刻,我对他们感到兴奋,并且能带他们体验这些东西是很棒的,但其实他们没有测试你的游戏。
熟练玩家与有效反馈
在这些玩家中,还有一个重要的分类是经验丰富的人。经验丰富的人虽然他们的经历不应被贬低,但其实他们对于开发者而言非常有价值,因为他们能够看透许多细节。那些在VR中待得够久的人,他们不再会被单纯的沉浸感分散注意力,因此能够深入探讨那些可能会干扰体验的因素。
观察到很多的事情,特别是“contraption”究竟在游戏中是做什么,人们在游戏中实际可以互动的东西有哪些?什么会引起他们的注意,这是非常有价值的。
用户测试中的洞见
想象一下虚拟现实,因为它是如此新的事物,因此它是一个高度迭代的过程,你必须不断尝试和用户进行测试。那么,结合你进行的广泛用户测试,这个过程中最大的收获是什么呢?
有些反馈并不是特别激动,但包括人们连接物体的方式。例如,反复观察他们,什么时候他们觉得可以自由尝试,尝试了什么,并对这些数据进行整理以发现模式。我们会观察人们,实施某些新的东西,然后围绕这些机制做一些迭代,再放回去看看是否感觉更自然。在最终的体验中,反应有两种,第一种是他们根本没注意到,这是一种成功,因为体验如此自然,他们在心中的叙事贯穿始终,没有中断或不适。另一种反应则是他们会说:“哇,太好了。”因此,我在许多方面看到,作为开发者和设计师,我们实际上在经验中慢慢通过这些体验与用户一同构建信任,他们开始逐步建立对这个世界的信任。
我们不可能在一开始就实现存在感,实际上,只有在你戴上设备的20秒内它是免费的,但之后的一切都是我们试图不让任何事情失误,以便脑海能意识到这是假的。有时已经为时已晚,因为最终体验的保真度及其构建方式未能满足期望。
关于电影经验的借鉴
我关于存在感和可信度的一种思考是,例如在电影中,你可以体验到一种悬置的怀疑。你去电影院观看电影的过程中,有一个完整的仪式来准备你的思维,涉及到观看大量预告片,然后看到标题,音乐响起,然后你被推入电影中,理智上处于很强的存在感。我认为这个过程中的许多仪式是准备我们接受故事的,而我不确定我们是否发现了VR的所有这些仪式。
不过,我想到的关于存在感和可信度的类比就是它们有点像纸牌屋,一旦你在电影中发现了一个巨大的情节漏洞,这就会立即把你带出故事。如果有任何东西破坏了存在感和可信度,那么这个纸牌屋可能就会崩溃,使得人们很难再次感受到同样的沉浸感。因此,当你观察人们并通过这种视角来观察时,有哪些你认为可能会真正打破这种存在感的触发因素呢?
打破存在感的因素分析
我认为有很多小因素,但如果我试图将其归类,我认为有几个重要的方面,比如说我称之为的现实系绳,它使得你无法完全投入到这个体验中。它可能源于很多少见的原因,比如大多数人在这类大设备上感觉不舒服,周围有人在真实世界中,他们可能永远无法完全进入这个体验中。或者你可能会正在紧张地在脑海中持有某种对真实世界的认知,而当你进行房间规模的设备设置时,你确切知道你的咖啡桌就在那,因而要以不同的方式控制自己。又或者在一次我站在设备的电缆上时,恰好电缆完美地竖立着,当我站上去的时候,那就像个乐高块。我的脚是赤裸的,我的脚丫子有很多特别敏感。在那一瞬间我想着太久,形成了那种过于膨胀的对电缆的感觉。
即使是这样,你都得你的注意力会被拉去体验之外,你的脑海还在后面努力保持对这个世界的表征,以便你能绕过那些电缆的一瞬间,同时仍然在对抗僵尸或其他事情。这显然会影响体验。然后还有像我饿了,或者生理上的需求,这都是头脑必须处理的高优先级因素。
再比如说,我之前提到的当期望破坏保真契约时,这会紧紧将我拉出这个体验。例如,当我走近VR中的墙时,空气质量发生变动,某些东西触发了我的意识,突然觉得这感觉不那么真实。最近我在一个水族馆的模拟体验中非常酷,但我只是尝试获取一些材料来为我的讲座进行剪辑而没有戴上耳机,突然觉得“哦,这样听起来真的很平淡。”我意识到这是因为空气不对劲,我能够听到的声音与真实环境不匹配。然后我戴上耳机听见背景音,突然间这种感觉变得更加强烈。通常缺少某种维度的元素,也可能会把人们拉出体验。
AI与叙事的未来
最近,我做了不少关于VR的采访,而AI已经成为一个话题,尤其是在叙事方面,能够通过智能NPC角色进行这些复杂的叙事交互。但我认为还有许多不同维度的创意AI可以进行程序化内容生成。尤其是在过去几年的各种重大突破,深度学习和虚拟现实结合的现象,AI也逐渐迎来了创新的浪潮。因此,由于你在AI和VR两方面都有背景,我很好奇你是如何看待这两个领域相互结合的发展。
我认为在可信度角度上,这是一个很重要的方面。很多人都在关注AI,尤其在VR中,过去40年在视频游戏中实现这一点都很困难,而在VR中则更为复杂,因为我们的大脑关注许多通道。这意味着细微之处不自然的频率会直接导致大脑认定这一切是假的,体验从那时刻起就崩溃,而要重新建立这种信任又是非常困难的。我们必须考虑如何避免这些问题。正如你以前提到的,某种仪式性的准备,实际上有一部分体现在体验设计本身中,这也是非常困难的。
比如说什么是非线性叙事?如何在电影和游戏中实现?我们拥有很棒的工具以确保玩家按照我们的意愿进行。但在VR中,你可以揭开一切,穿越障碍。因此,如何创建一个体验来引导玩家朝着正确方向,保持一致性,是构建这个虚拟AI物体时需要面对的巨大挑战。同时,在制作内容时,考虑到玩家在长时间内如何互动,以及如何为他们提供自然的移动方式,都是复杂的考虑因素。
我认为这个过程的核心对于任何想要深入这个领域的人工智能,尤其是要驱动虚拟代理的人工智能文化是从简单开始,努力发掘模式,同时逐渐暴露和引导玩家。起初,可能只是一个小球在世界中移动,但你尝试给它赋予自然的节奏感,然后观察玩家的反馈,逐步增加复杂性。但若从复杂开始,几乎肯定会出错,玩家很可能立即产生不良反应,甚至是“无法实现谷底”的反应。
未来的探索与实验
Fantastical Contraption是与Vive购买一起发布的游戏,已经发布了几个月。我很好奇,在VR领域你接下来打算做什么?
我总是在实验,总是在尝试新事物。我喜欢VR,正是因为它的挑战,正如我所说的那些原因,这也是如此令人兴奋。实际上,我认为这是一个巨大的机会,让人们可以体验和情感共鸣并领悟到以往无法体验的东西。因此,我认为这些都是超级令人兴奋的。我对非线性叙事等问题特别感兴趣,探索如何讲故事。我们正处于一个范式转变的前夕,不仅仅是在交互媒体中,实际上是在信息本身的表现上,如何交流、学习以及处理大量信息的本质。添加空间的物理特性与能够在空间那儿移动、抓取东西并融入到那个世界中,都会使这一切发挥作用。
一切都来自于好莱坞对这一切的定义,而这种定义必须终止。我在80年代长大,这种方式并不现实。因此,挑战是重塑这一概念,思考游戏的存在方式。我们目前有大约20个原型在推进当中,我们仔细观察它们,看最后我们的重点在哪。
互动叙事的启发
在叙事方面,借鉴经验,我访问了许多不同的叙事项目,其中看来在非线性交互叙事领域取得突破的多是视频游戏的类型。我很好奇,是否有特别的游戏或标题可以作为灵感,让其他叙事者学习其中的基本原则?
随便想到的几款游戏,从非传统叙事的角度来看,这很重要。有很多很棒的叙事性游戏,它们在比较传统的格式中做得很成功。它们可能具有线性体验。而那些通过非言语交流、在开放世界中共同经历的游戏,如《Journey》,在故事讲述上则非常开放。对我而言,在故事的核心设计上,它仍然是相对线性的,但人与人之间的非言语沟通,传递出深刻的力量,去理解这种人类之间的连结,这是我们需要探索的。
还有《Brother: A Tale of 2 Sons》,这也是基于线性结构,但在建立对控制器的情感依附发挥了巨大的作用,然后又在很有趣的方式上进行了一些打破规则的操作,帮助我们用新颖的视角进行思考。我们想要继续依赖线性叙事,而实际上,我们才刚刚开始发掘这些有趣的工具。我们需要超越线性叙事,去看到可能出现的新形式。
虚拟现实的最终潜力
最终,你认为虚拟现实的潜力是什么?它可能会促成什么样的发展?
我认为,从某种程度上来说,我无法确切预测时间或方式,但我认为我们仅仅是刚刚接触到如何理解这一切。最终,它将从根本上改变人类与信息以及彼此之间的交互。我并不认为它将替代现实,但谁知道呢?各种未来主义的事情可能会让我错。关于未来的事物,我们尚未开始想象它们会是什么样子。
我们现在处于初期阶段,兴奋不已,但戴上这些设备并不完全舒适。即便进入移动应用领域,技术的力量目前还不到位,我们都还在适应各种问题。因此眼前的这些大事在我们面前,但我们甚至还未到达那个境地。最重要的事情就是疯狂而充满探索精神地进行实验,创造机会去检视我们与事物的根本互相作用,以致能追溯到Ivan Sutherland的传奇时代。我们必须抛弃过往,重启一切,探讨VR的语言,问自己,在我们的人生中,有哪些全新的事情是我们从未能够做到的。
最后的话
有没有什么想要补充的?
我非常兴奋。我觉得这太奇妙了。看到各种各样的内容问世,人们的实验再创造力十足的表现令人振奋。我的警告是,不要过于紧绷于让人们适应动感病,通过强迫他们参与经历来取得进展。回归初衷去思考,什么是虚拟现实的独特之处?这不是让人恶心,而是带他们探索新领域。因此,如果不加采择,恶心的体验可能会影响整个媒介的声誉,这对我们的发展绝对没有好处。我的呼吁是:停止让人们感到恶心。
结束语
非常感谢您,Kimberly。
谢谢你。
总结
这次的采访对象是Kimberly Voll,她是Fantastic Contraption团队的一员,拥有人工智能博士学位,并在过去20年中关注玩家心理学和游戏设计。通过这次访谈,我收获了几个重要启示。首先,Kimberly关于保真契约的讲解印证了很多存在感研究的理论,这指向了如何通过建立用户的期望与空间的可交互性来培养存在感。她提到,我们并不完全了解行为的可预测性,因此需要广泛观察用户的反馈,以逐步建立信任。一旦契约出现裂缝,存在感就会受到打破。
最后,我认为,正如Kimberly所提到的,VR为我们创造了讲述故事的全新可能,尤其是在环境叙事的背景下,通过这个媒介的独特方式不断实验,最终能大大推动互动叙事与玩家经验的深度和广度。
感谢您的收听《Voices of VR》播客。如果您喜欢这个播客,请告诉您的朋友,传播消息并支持我们,访问patreon.com/voicesofvr。
感谢您的收听!