The Voices of VR Podcast

你好，我叫Ken Bye，欢迎来到Voices of VR播客。这是一个关注空间计算的未来以及沉浸式叙事结构和形式的播客。你可以在patreon.com/voicesofvr上支持这个播客。

继续我的24集系列，今天的节目将讨论一件名为Temporal World的作品，这是一个快乐的声学虚拟现实记忆世界。这是由Chloe Lee创作的一部作品，她与一个研究机构合作，创造了你正在穿着的触觉背心。实际上，它是一件量身定制的时尚作品，穿在身上时，背心在你肩膀、背部、手臂的不同维度上震动，非常无缝地融入了这个沉浸式体验的音效设计中。

这个作品探索了记忆的不同维度，以及从一个地方迁移到另一个地方的过程中的归属感和流亡感，同时也反映了对这些不同地方记忆的碎片化特征。你围绕这些不同世界的点云表示进行探索，与你互动的这些不同对象会将你引入这些不同的记忆中。此外，还设计了一个手势，当你在面前摆出一个三角形时，Leap Motion会检测到它，并帮你在空间中移动。当你在空间中移动时，它会给你提供一种触觉反馈，感受到你正穿越这个空间。所以，是的，这是一个真正探索记忆的不同维度、迁移，以及触觉体验与声学整合和虚拟现实叙事结合的作品。

今天的播客是与Chloe的访谈，发生在2023年3月15日，地点在德克萨斯州的南方西南地区。现在，让我们一起深入了解。

访谈开始

你好，我是Chloe Lee。其实，这是我的第一个VR项目。我在艺术领域有背景，同时也有电影制作的经历。在这里，我和一个研究机构合作制作了一件触觉夹克。我做了这个世界里的所有摄影测量、声音工作和所有的触觉编排，并且我与一位了不起的开发者Lukas Martinich合作。我觉得在这个项目中，我是基于我自己个人的经历来概念化的，考虑到我家族的迁移历史。最初，Temporal Worlds是一个关于记忆的研究项目。我把它变得个人化，因为我之前在其他版本和项目中工作过，这是我第一次又在这样规模的一个新媒体中工作。

由于团队很小，我扮演了很多角色。我觉得与开发者的合作真的帮助扩展了这个项目，并且与这个研究机构的工作与不同领域的知识结合在一起。我还聘请了一位时装设计师来帮助我设计一件能很好发挥作用的夹克。

背景与动机

我出生在加利福尼亚，拥有美国和加拿大的双重国籍。我在柏林制作了这个项目，之前住在纽约。这种背景设定了我在不同地方移动和探索迁移主题的语境。这个项目的想法最初是在新加坡提出的，我的妈妈是新加坡人。在那里，我主要是为了接近我的祖母而访问，开始听到关于这个国家如何变化的故事。过去，它主要是由村庄和渔村组成，尤其是在过去几十年中，自上世纪80年代以来，工业化改变了文化景观和人们的迁移方式。很多时候，我与人交谈时，他们谈到自己与居住区域的互动感变弱，无法与自己所住的地方建立根基。我了解到周围的建筑，如果30年甚至已经成名的建筑正在被拆掉以建造更高更大的新建筑。我在思考这种发展对人们的影响。尽管我认为怀旧是一种对过去的向往，但现实中大多数人对变化感到满意，但也有一些人希望某些地方能够得到保护，尽管他们也想向前发展。

我所遇到的一些有趣的人实际上是年轻人，他们将旧的、破旧的空间转变为社区空间，而不是完全重建。还有，他们将中国歌剧与电子音乐结合，这种方式让我觉得很有趣。对我而言，从小我一直对家族历史感兴趣。我总是询问太多问题，可能让我父母和祖父母感到烦恼。我一直想探讨记忆的保存是什么？什么应该被记住？我们应该如何记住？在疫情期间，我得到了一个耳机，我开始在3D世界中工作，因为我没法使用相机获取新画面。所以我想利用VR，因为当我们谈到发展和进步时，VR这项技术的历史与这种需求的结合是一个有趣的矛盾，我想探索这种矛盾。

触觉和声学体验的合成

触觉的部分是后来才加入的。在疫情期间，我已经向Fulbright奖学金申请了这个项目，试图将内部空间外化。抵达柏林后，Fulbright奖学金让我与研究机构Matters of Activity合作，他们真的很棒，由许多来自汉堡大学及其他地方的教师组成，背景各异，致力于共同解决类似的主题和问题。在我参与的一次驻留中，我发现了一个触觉原型，这个原型是Maxime LeCave、Yoon Kim和Fardine Galomi开发的。这是一个流动的开放服装，类似于背心，是一种传统的韩国汉服。当我试穿它时，我已经为我的项目开发了声景。我觉得这很有趣，因为它将声音转换为频率，而这种自然频率和震动模式与每种声音的振动模式相匹配。

我需要考虑如何将这种频率和幅度按我的需求进行开发。由于这是我尝试再现的个人经历，因此所有的视觉和声音来自于我的环境录制，通过摄影测量对我在柏林、纽约和中国的地方进行了3D扫描。纽约和中国的部分都是我的档案，我并没有想把那些地方变成3D互动空间，只是试着去组装它们，结果便是如今的样子。

然后我想做一件类似的夹克，以模拟我对震动的体验。我完全重新布线整个系统，甚至参加了一场有管弦乐器的合奏音乐会，找一个扬声器旁边，倾听了一个多小时。在此过程中，我很注意基于声音变化体验震动的感受。我在关于触觉技术的研究中读了很多，尤其是关于人们是如何体验感知的。我还开发了第一次版本的触觉手套，但从科学角度看，身体的真实感官体验并不是我真正想要的，因此我决定去看看我身体如何体验振动。更高的频率通常在肩部和颈部，较低的频率则在手指或腹部。很多人是这样体验的。

互动与感官体验

不张着自己告诉自己实现什么目标，我与技术的结合创建了一种感觉的安装。比如，有一个瞬间的传送功能，它带来了全身的震动体验，尝试模拟快速穿越空中的感觉。由于这是一个模拟系统，使用这种模拟技术非常有趣。声音与震动之间的自然联系是显而易见的。我计划在下一个版本中加入蓝牙集成，这样就可以实现完全控制。例如，当你去抓住某种东西时，可以感受到交互部位的震动。但是目前我采用的是模拟系统，只是与声音相应工作。因此这是一个权衡。某些部分会给你一些关于环境的一些导航信息，但大多数是更表达性的。

我不认为有任何时候我意识到我的身体移动与声音或触觉体验有任何直接关系，可能是因为当我看到我的身体与某种反馈之间的关系时，如果不是非常明确地可以用手摆动一下就能立即听到，那我也不会考虑这是低频产生的反馈。

我看到的记忆的样子，这个记忆是关于那些我之前未曾见过的体验，体验是这种氛围的。就像是一种氛围的音乐。music是什么样的类型？是氛围音乐吗？

氛围音乐与体验

是的，我会说是氛围音乐。我认为是声景，氛围音乐并不是意图着重于某一部分，而是为了在空间创建气氛，是为了在空间中区分出不同区域。我在创作时，常常需要抽出时间，试图进入那个回忆的区域，在我体验这些情绪时，或许也是我处于某种心情中。这是直观的，直到我得到正确的声音景观，我才会将其包含在其中。那些让我感觉不对的我会选择不加入，这是直觉的。

而且总体来说，我对氛围音乐的印象是，我并不觉得氛围音乐与我的能动性有关，所以它实际上只是作为一种背景。另一个有趣的事情是你设计了一个独特的手势机制，在你面前摆出一种三角形的姿势，利用Leap Motion追踪能让我进行传送。而每当我传送时，我身体都会感受到一种震动。我觉得这种机制充分有效地让我感受到在空间中移动的影响。与虚拟空间中的常规移动不同，这种具不同的触觉反馈让我感到在某种程度上真实地进入了这个空间。

总结与反思

我希望这再次能够回到我想要表达的状态中。我在柏林的经历来自纽约，原本在纽约的快节奏生活中不断移动，而在柏林我学习如何放慢下来，注意环境中的细节。快速移动时空气的涡流干扰是为了让你意识到这些思维的内容，试图鼓励你慢下来。实际上不可能移动得更快，因为你需要做出很多手势来从A点到B点。

我希望这个作品让你意识到慢下来的重要性。至于第二部分，从整体结构来看，确实有两个部分，第一部分主要是让听众能通过我为他们预设的路径学习。而第二部分是更开放的空间，让听众自行创造路径。同时在不同的场景中，遇到新的对象，并通过这些对象传送到新的场景。虽然第一部分是整个记忆的简单介绍，但核心设计意在帮助人们在这个世界中穿行。

结束语

我非常感激你能加入到这次交流中，Chloe Lee是Temporal World的导演，一个触觉声音虚拟现实记忆世界。对我来说，这个体验给我的体会有几方面，首先，我非常欣赏触觉背心的结合。它是一件非常定制的艺术作品，独立存在时也相当精美。穿戴需要一些步骤，但一旦穿上，可以在这个世界中探索，它与音乐的结合让你在身体感受音乐的同时，沉浸感极强。

虽然视觉上呈现有些空洞，点云的表现却是动态的，随着你在空间中移动而移动，反而留给想象空间，让你自己填补那些空白。而触觉体验与声学设计的紧密结合，使得我在这个空间周围的感受非常深刻。我希望未来能看到更多与触觉设备紧密结合的沉浸式体验。

最后，感谢你收听Voices of VR播客。如果你喜欢这个播客，请传播出去，告诉你的朋友，并考虑成为Patreon的会员。这个播客的存在依赖于你们的支持。