The Voices of VR Podcast

Hello

我的名字是Ken Bai，欢迎收听《The Voices of VR》播客。这个播客探讨沉浸式叙事的结构和形式，以及空间计算的未来。您可以通过patreon.com/voiceofVR来支持这个播客。

继续我们的系列

在本期节目中，我将讨论来自2025年西南偏南（South by Southwest）的不同沉浸式故事，并开始深入一些我们真正关注的不同体感互动作品。因此，今天我们将讨论Jibo Lee的《Echo Vision》。

作品概述

这个作品包含三个部分。第一部分是一个基于手机的移动AR体验。手机被设置在一个3D打印的蝙蝠面具的背景下，使用激光雷达扫描仪扫描你周围的世界。当你发出一些噪音时，它将检测到这些噪音，然后发送出一个脉冲，通过着色器来模拟不同的回声定位的方面。这个作品试图给你一个回声定位的视觉翻译。

他们还创建了一个充满气球的洞穴，你需要在这个洞穴中导航。此外，他们还制作了一个完整的视频体验，使用人工智能算法对蝙蝠的叫声进行分类，并设计出不同的场景，创建一个全沉浸式的互动视频装置，展示蝙蝠的叫声以及一些音频反应的可视化效果。你坐在一个具备触觉振动的沙发上，沉浸在整个音乐视频体验中。

第三部分

第三部分是他们实际进行了一次野外考察，前往德克萨斯州奥斯汀的国会街桥。晚上，大约有70万至100万只蝙蝠在中央标准时间6:30或日光节约时间7:30从桥上飞出。我有机会亲眼看到这些蝙蝠在夜空中飞舞。他们还与奥斯汀蝙蝠救助中心合作，释放经过康复的蝙蝠。在奥斯汀的沉浸式冒险中，见证了上千只蝙蝠出巢，为即将到来的夜晚捕食。

与Jibo的对话

我与Jibo的对话发生在2025年3月9日的南方西南（South by Southwest）展会上。让我们来深入了解一下。

自我介绍

嗨，我是Jia Bao Li，我是一名艺术家、设计师和创意技术专家。同时，我还是德克萨斯大学奥斯汀分校的助理教授。在西南偏南（South by Southwest）展会上，我展示了一项名为《Echo Vision》的作品，属于XR体验。

你的背景

可以给我讲讲你的背景以及如何进入这个领域吗？

当然。在进入内容创作之前，我曾在苹果公司工作，参与了Apple Vision Pro项目四年。之后我希望获得更大的艺术自由，于是我加入了学术界，成为教授，开设了生态未来实验室。我涉猎各类媒体，包括XR安装、表演和视频。媒体并不重要，重要的是内容。

关于XR的兴趣

我知道我们之前谈过一些你以前项目的事情，也许你可以给我一些背景，说明你为什么专注于XR？

我会想到我在哈佛的时光，我一直在研究技术如何介导我们对现实的感知，并创建三种感知机器，把极端情景带入讨论中，以探讨社交媒体、定向广告和谷歌搜索对我们感知的影响。

之后我制作了一个VR电影《Once a Glacier》，讲述一个女孩和一块冰川冰之间的故事。冰川在融化和退缩，这块冰也面临威胁。我们的最后一次对话中提到的Squeaker是‘鼠标教练’，我制作了一个智能跑步轮，当我在社交媒体上跑的速度超过鼠标时，它会作出反应。

人类与非人智能的交集

我们谈到你的兴趣不仅在于人类之间的联系，而是人类与非人类智能之间的联系，比如动物。你能详细讲讲你对这个交集的兴趣吗？

当然。我们生活在一个多元的现实中，这个现实被技术、我们的偏见和所阅读的媒介所影响，甚至不同物种之间的财富差距也会影响我们的观察。比如，我的感知和蝙蝠的感知是非常不同的，因为我们有不同的感官环境。迄今为止，我与夏威夷的细耳乌贼、章鱼、蟋蟀和中国的亚洲象一起工作，现在是在蝙蝠和鼠标身上。我们通过与这些物种的共同创作，能够更好地理解它们的智能，并培养好奇心，改变认知。

研究的催化剂

是什么催化剂让你开始进入这个研究领域，探索人类智能与超越人类的智能的交集？

我认为是章鱼。章鱼拥有分布式智能。在夏威夷的Keballum海洋生物实验室，我观察了多只章鱼，我从中学习了许多，像是《章鱼老师》中的故事一样。对此我感兴起时，我开始与鱿鱼、章鱼、蝙蝠、象和蟋蟀合作，逐步展开。

德克萨斯州的蝙蝠生态系统

这里在德克萨斯州奥斯汀有着大量的都市蝙蝠群体。能不能告诉我你最初是如何接触到蝙蝠生态系统的？

当德克萨斯大学奥斯汀分校聘请我时，他们首先带我去看蝙蝠，我对这种奇特而有趣的现象感到很吸引。因此，我决定加入这所学校。在接下来的几年里，蝙蝠的想法一直在我脑海中，我想与它们一起做些事情，这就是这一切的开始。

每当夜晚，150万只墨西哥自由尾蝙蝠都会从国会桥飞出，这成为了一大旅游景点。开始时，市民视它们为害虫，但保护者和科学家Marlene Tuttle以及我的项目合作者使用各种方式改变公众对蝙蝠的看法，最终保护了这些蝙蝠不被消灭。如今，它们真正成为了城市中的标志。

蝙蝠的壮观现象

我昨天第一次观看了这个现象，那场景真的非常壮观。你描述一下昨晚发生的事情，以及你们合作带领大家去体验蝙蝠的飞出。

昨晚6:30（中央标准时间），蝙蝠从桥下飞出，就像一条喷涌的火龙一样。非常壮观，蝙蝠的速度快得惊人。关于这个桥，蝙蝠是否常常聚集在这里？这里的生态系统有什么独特之处，为什么吸引这么大数量的城市蝙蝠？

奥斯汀的最大的都市蝙蝠群体

它们是美国最大的都市蝙蝠群体，这座桥的设计是由于工程师的偶然，产生了蝙蝠栖息的完美空间。蝙蝠是在八十年代选择这座桥作为它们的家。

昨晚的活动

昨晚我们从Fairmont酒店步行十分钟到达了蝙蝠桥，合作伙伴Austin Bat Refuge带来了通过康复的蝙蝠，以便让公众近距离观察这些蝙蝠。合作过程中，释放的两只雄性蝙蝠与700,000只雌性蝙蝠一起飞出，形成了一个母蝙蝠群体。

这些雌蝙蝠在冬季飞往墨西哥，然后在繁殖期间返回这里。我们甚至放映了蝙蝠的飞行轨迹，观众可以看到它们从桥上下飞，飞向奥斯汀的方向。这些蝙蝠晚上出来捕食昆虫，偶尔飞往圣安东尼奥寻找食物，当它们吃饱后再回来。

蝙蝠的生态环境

这一切的生态教育和蝙蝠习性，让观众近距离观察蝙蝠。使用手持设备，让人们能迅速理解蝙蝠的击打声和社交叫声，体验沉浸式的音频感受，甚至能够在场馆中通过蝙蝠面具进行回声定位体验。

回声定位的首次体验

不得不说，这个蝙蝠面具的设计很独特，并且带来了新的体验。参与者可以用声音去控制和感知3D环境，生成自己的回声定位效果。因此对于初次尝试的朋友来说，非常直观并且容易上手。面对众多的观众，不需复杂的VR设备，简单的体验就能引起大家的共鸣。

技术的挑战

解释回声定位的过程非常复杂，但我们能通过视觉效果来展示其本质。通过激光雷达技术与手机结合，我们不仅模拟蝙蝠的回声，甚至能体会到声音的情感波动，通过各种对比提升了体验。我们用一种更具趣味性的视觉效果展示了声音传输和波纹。通过这种模拟技术，人们能够深刻体验到蝙蝠如何利用回声定位感知周围的不同材料，甚至通过不同的声音频率改变与猎物的互动。

音频可视化的艺术感受

你提到了用音频反应的可视化效果，能否讲讲这个过程以及如何寻找创造性的独特方法？

这得益于我的合作伙伴Matt Marco的贡献，他专注于动物音频艺术，并为许多博物馆创作过相似的体验。我们将蝙蝠的社交行为与音乐相结合，创建了“蝙蝠卡拉OK”，将蝙蝠的叫声通过不同的视觉场景呈现给观众。这种独特的音频视觉体验模式，直观地将蝙蝠的习性与我们所感知的情感结合在一起。

将来计划

这个项目的未来有什么计划？还有什么新项目在开展吗？

我们在考虑与其他使用回声定位的动物进行合作，比如白鲸和虎鲸，进一步拓展这个项目。

我最近一个月刚在东京完成了一场个人展览，展出了围绕北极圈艺术家驻地创作的十个项目，探索极地生物的与气候变化的关系。接下来，我将在奥斯汀进行另一次个人展览，目前我正在思考整个叙事。

对沉浸式社区的看法

在你眼中，沉浸式技术、沉浸式艺术和沉浸式叙事的最终潜力是什么？

最明显的一点是能够体验其他生物的感受。这在医疗和心理健康领域已经见到很多应用，而我目前的工作主要集中在体验其他物种的感知上。我希望通过这种沉浸式体验能够帮助人们更好地了解这些生物，进而激发人们的改变行动。

很多人认为蝙蝠脏乱并且携带疾病，但实际上只有两种吸血蝙蝠，它们主要吸牛和马的血。通过这种沉浸式体验，希望人们能够学习到蝙蝠对生态系统的重要性，比如它们是出色的授粉者，而我们没有它们就无法种植龙舌兰。

支持与鼓励

如要支持我长达十年的口述历史项目，并帮助我持续进行这样的作品，欢迎在patreon.com/voiceofVR上进行支持。每一位支持者的加入都能帮助我继续行走，了解尽可能多的作品，并与更广泛的社区分享这些故事。

感谢您收听这一期的《The Voices of VR》播客。