The Voices of VR Podcast
介绍
大家好，我的名字是Kent Bye，欢迎来到《The Voices of VR Podcast》播客。这个播客关注沉浸式叙事的结构与形式以及空间计算的未来。你可以在patreon.com/voiceofvr支持这个播客。
今天我们继续探索Venice Immersive 2024的不同沉浸式故事，今天的节目介绍一个名为《Address Unknown: Fukushima Now》的作品，创作者是Arif Khan。这是一个点云纪录片，展示了福岛核事故后不同的废弃鬼城。这是一个记录这些空间中编码的记忆的方式，结合稀疏动画与大量的着色器，通过点云表现不同的城镇景观，并让不同的市民分享他们对福岛灾难后所失去的记忆。
访谈开始
这次与《Address Unknown: Fukushima Now》导演的访谈发生在2024年8月31日，星期六。接下来我们就开始吧。
我叫Arif Khan，目前在日本工作，是VR导演，同时也是《Fukushima Now》这部在威尼斯国际电影节首映的VR纪录片的编剧、导演和制片人。
背景和旅程
可以多分享一下你的背景和进入这个领域的旅程吗？
当然可以。我第一次接触VR是在电影学院。当我毕业时，我加入了Oculus Story Studio作为初级制作人，非常幸运地接触到沉浸式项目，尤其是叙事沉浸式项目。这促进了我深入探索VR的愿望，也让我思考叙事与技术的关系。这是VR早期的日子。在Oculus Story Studio之后，我在Airbnb VR工作，负责他们的营销内容。随后，我转到VR制作工作室Weaver，参与一些他们的项目，包括作为制作人的《Gnomes and Goblins》。在那段时间，我开始更加深入地思考个人项目，并希望将我在这些其他VR制作和工作室中学到的经验应用于一个让我兴奋的故事和项目。
最终，我去UNCSA进行了沉浸式虚拟现实的驻留项目，开发了一个名为《Black Ice》的沉浸式赛博朋克VR体验，并在南方西南音乐节全球首映。这对我们来说是一个令人难以置信的经历。然后，我很快开始了一年的富布赖特奖学金赴日本发展关于福岛的项目，使用VR和沉浸式技术讲述一个与福岛有关的非常个人的故事。
决策时刻
你能谈谈你决定讲述这个故事的那一刻吗？
这是一个非常有趣的偶然时刻。我第一次来到日本是在2019年，纯粹是为了游玩。我乘公共汽车前往仙台，沿着福岛海岸线蜿蜒而行，看到许多破旧的房屋、 abandoned cars 以及超级市场都被遗弃。我开始更深入地思考这些人发生了什么，以及他们去往何处。这种个人的探寻和好奇心驱使我在回到美国后开始对福岛现状进行大量研究，探讨十年后福岛的状况。
捕捉空间与讲述故事
那么，遇到这些鬼城后，下一步是如何捕捉空间或叙述故事的？
这是一个慢慢推进的过程。第一次前往仙台的公交旅行是在疫情前。当我返回美国时，我们封锁了一年半。我知道自己会因为富布赖特奖学金返回，但在这一年间，我可以进行大量的研究和发展。因此我进行了关于当地联系人、故事、人物的研究，并在搬到日本之前建立联系。我当时想要讲述哪些故事，想要如何框定这些故事还相对模糊。我们知道想使用摄影测量技术和点云，但具体如何应用却很难在我于2022年3月前往日本之前就找到方向。
当我开始每周和每月访问福岛，与许多当地人见面并真正了解故事和环境时，我们开始拼凑出这个作品的结构。我们发现这些类型的记忆可以很有价值，这所小学可以是一个奇妙的探索地点，或者这个农场、这个神社，真正开始感受到环境。一旦知道要在VR中捕获这一切并带入Unity或Unreal，我们就可以考虑什么技术适合这个项目。在这个过程中，我的重要合作伙伴之一是我们的技术总监Ruben Farsali，他是摄影测量与点云渲染方面的专家，并在这些设计上具有丰富的经验。因此他加入了项目并能够为捕捉这些VR位置提供专业知识。
讲述人的口述历史
我认为这个作品的一个关键部分是你从以前住在福岛的人那里获得的口述历史证言。那么，你是如何追踪到那些能够开始讲述这些故事的人？是先找到故事再找到地点，还是先找到地点再寻找那些帮助讲述故事的人？
我遇到的许多鬼城并没有在最终体验中被使用。它们几乎成了初步的灵感来源，吸引我进入这个主题。实际上，一切始于人类的故事和人性，结识那些人，并试图理解是否存在与他们的记忆感联系的环境、地点或建筑。遇到这些人是通过当地的摄影师和记者获得的，他们与本地的人有联系，分别是一个牧师、一位小学老师和一些小学学生。这些文化的多样性得益于他们的热情引荐。我们进行了许多与当地人交谈的机会，其中一些对这个项目非常兴奋，而其他人则相对犹豫和不安。在数十次的访谈中，我们最终找到大约5到8位愿意分享他们记忆的人，而更重要的是，他们的记忆与我们能够扫描的地方和位置相关联，这使得我们能够将故事在VR中现实地展现出来。
福岛的事故与影响
也许值得倒退一步，给福岛和那里发生的事故提供更多的背景。从潮汐波开始，你通过缩放这些核反应堆的画面开启这个体验，最后也是以同样的反应堆结束。所以在开头和结尾中，你展现了核能技术走错的道路对整个社区造成的影响。
确实很有趣，我想在核能和家之间有一种有趣的关系，尤其是福岛的情况，它有些困扰。40到45年前在福岛兴建核电站的想法是一个庆祝的标志，它为当地的经济、就业带来了巨大的繁荣，是许多小镇的刺激。然而，在2011年的灾难中，这一切完全翻转了。我认为这正是故事核心的范式和透镜，也正是这些开头和结尾的瞬间所表现的，展示了当年福岛的庆祝与之后的悲剧。
XReal项目中的设计模式
我注意到在许多XR项目中都有一种导览式的模式，观众穿越空间，像是有个讲解员介绍事物和角色。但在这个项目中，有一种更隐蔽的声音在讲述，例如：“这个地方对我意味着什么。”这样的叙述展现了一条主要街道上所有当地商业的历史，反映出一个完全被遗弃的地方所剩的点滴记忆。这些建筑空间承载了整个社区的记忆，这种导览式的体验非常强大，得以让我们感受到失落感因为是过去的回忆，而这都是使用点云的表现形式，也有一定模糊的边界感，容易让人联系到过去和记忆。请你聊聊这种导览模式是如何被编织在一起的。
当我第一次抵达像Futaba街这样对体验至关重要的地方时，我看到许多破旧的建筑和被遗忘的家。我在当时并没有任何连接或关系，但在我与在Futaba海岸长大的Onuma san一起走过那条街时，他能够讲述这条街的记忆：“那是我妈妈曾经去的理发店”，“那是我小时候去的超市”，“那是所有福岛工人下班后去的酒吧。”这时，我才意识到这条街的色彩、形状、以及它对Onuma san的意义。通过当地人的视角，我开始理解和欣赏周围的世界。因此，利用VR体验让观众体验这一切是有意义的。我们能展示他们现在看到的街道，Onuma san还可以分享一些关于当地建筑的轶事，重新为观众提供一种新的视角和理解，这是理解人类价值的关键。
点云作为美学
在体验中，当经过一个树木时，谈到其受到毒性放射性影响时，你能够将原本的纹理效果展示为树的热感应图像表现。你能谈谈关于使用点云作为美学，如何动态地调制这些效果以生动表现叙述的过程吗？
我们认为重要的是，这不仅是传统的纪录片，只是捕捉现存的世界，而是从当地人的视角讲述记忆。我们的记忆往往是被情感和色彩调动的，而通过点云和摄影测量技术，我们可以在色彩值、速度、节奏上进行创作，以强化叙述者想要传达的情感和基调。我们在实时渲染中能够通过设计探讨各种情感。通过热成像的视觉效果，特别是当本地人谈论与热源或福岛辐射玷污有关的元素时，我们能够增强那些回忆的沉重感，这是VR叙事特别之处。
音乐与声音设计的力量
能否谈谈音乐设计与声音如何提升那种情感？
对我们来说，声音设计的关键是能够在不同空间中感受那些记忆的脉动，无论是超市还是理发店，总能感觉到那种过去的余音，即使声音设计是模糊的，在某种程度上仍让人们能够感知到那些曾经的景象。这当然不会是100%完美的记录，但会让观众感受到自己仿佛置身于当下。我们希望体验能够让观众感觉像是回到了记忆中，而声音设计正是帮助营造这种情绪的要素。
分章节的故事结构
谈到这些章节，每个人都有自己深厚的情感联系——无论是街道上的商店、学校还是正在进行的宗教仪式。你的体验结构是进入一个空灵的空间，开场与结束的过渡中反复出现一些人的记忆。谈谈如何把这些独立的片段编织在一起。
这是个漫长的过程。例如，回到Anewa san的经历中，与他的深度访谈后我们记录下了他的故事。我们会再对内容进行修订、反馈、并获得更多的色彩与细节。这是不断迭代的过程，理解记忆如何与建筑相关联，然后拼凑出完整的叙事。
未来的探索
我注意到你提到这是作品的第一章，未来还有其他几个部分。可以详细解释一下将来会朝哪个方向发展吗？
当然，非常期待。与我们的合拍伙伴Serendipity Films一起，我们开始思考核辐射所带来的影响，以及它对不同文化和国家的影响。尽管第一集主要关注日本，但我们正从不同的文化视角探讨如何将第二集延伸至台湾等地。我们希望继续运用相同的技术，探索核能如何影响家庭和社区。
结尾与思考
故事的最后一幕谈到了记忆的放手，这更像是一种悲伤和丧失的悼念。你能分享一下这个结束点吗？
这其中有一句日语“shikataganai”，意为“无可奈何”。在涉及超出可逆状态时非常贴切。我们的受访者在叙述那些往昔的记忆时，感受到一种无奈，在这样的意义上，VR体验试图呈现出一种理解现实与向前进发的过程，尽管总是伴随着失落与悲伤。
威尼斯之行
那么你在威尼斯的参展之行了？
能够在威尼斯首映这部作品是我们的最大荣幸，过去三年来，这个想法的发展过程漫长而充满期待。能与如此多才华横溢的XR创作者交流，获得反馈，深感幸运与荣幸。
沉浸式叙事的未来潜力
你认为沉浸式叙事的最终潜力是什么，它可能会启发什么？
各种令人惊叹的体验展现了VR的丰富潜力，令人倍感振奋。无论是游戏、沉浸式叙述、个人作品，XR社区的创造力都令人兴奋。我期待看到XR行业的未来，体验更强的叙述能力，成为人类表达的一部分。
结束语
再次感谢您抽出时间来分享您的故事和视角。也希望未来能有机会将此次体验带回给社区，与大家分享！