/ Voiceofvr / 0浏览

从新闻扫描到生成AI爱尔兰Sean-nós歌曲在“You Can Sing Me on My Way”音频装置中

The Voices of VR Podcast

你好,我的名字是 Ken Bye,欢迎收听《Voices of VR》播客。这是一个关注未来特殊计算中沉浸式叙事结构和形式的播客。你可以在 patreon.com/voicevr 支持这个播客。今天我将继续我的系列节目,探讨来自 IDFA Doc Lab 2024 的不同体验。本期节目的主题是《You Can See Me on My Way》,这是数字叙事竞赛的一部分。

这是一个音频安装作品,使用了许多生成式 AI 技术,目的是试图重现 Shenoy 的唱法。这是一种传统的爱尔兰歌曲演唱方式,通常是唱关于当天新闻或文化上重要时刻的歌曲。它整合了多个生成式 AI 流程,关注来自不同来源的当天新闻,然后提取亮点,将这些内容转化为歌曲或诗歌。接着,它将内容从英语翻译成爱尔兰语,并运用到一个完整的模型上,该模型经过训练,可以进行 Shenoy 的唱法。这是一个看起来像悬浮球体的安装,球体内部有一条分界线,就像在唱 Shenoy 的歌曲一样。因此,今天的《Voices of VR》播客就要探讨这个主题。

我应该提到,在 InfoDoc Lab 期间,我的声音逐渐变得有些嘶哑,因此在这次对话期间我说话的声音听起来有些嘶哑。这次与 Sean 的采访发生在 2024 年 11 月 20 日,地点是荷兰阿姆斯特丹的 IFA Doc Lab。接下来,让我们深入讨论。

Sean Hannan 的介绍

大家好,我是 Sean Hannan,来自阿姆斯特丹。我是爱尔兰和荷兰的混血儿,这两个背景在我的作品中有很大影响,这一点我们稍后会多谈。我在沉浸艺术和数字叙事中的角色,老实说,到目前为止还相当有限。我更像是被称为传统概念艺术家的那一类。我们受邀在 IDFA 展示这个作品,因为我在使用 AI,而 Doc Lab 对通过新数字流程进行叙事非常感兴趣。这大概是我在这方面的经验。我从来没有考虑过要制作一个沉浸式体验,一直以来它只是一个装置,观众可以看到它,并自行得出结论。

Sean 的背景与艺术之旅

你指的是我的艺术背景吗?我2009年在阿姆斯特丹毕业,从那时起就一直在做艺术家。尤其是在毕业后,我开始对我们可以相信什么、什么是真实的产生了浓厚的兴趣。随着网络信息过载、阴谋论成为越来越普遍的现象,像是在 2009 年、2010 年的那段时间,我作为一名艺术毕业生,经过几次展出之后,突然意识到,作为一名坐在工作室里的艺术家,需要考虑下一步该怎么走。于是我发现自己开始观看大量的阴谋论,突然有了一个意识:如果这就是我现在在做的事情,我想我应该开始做一些与此相关的作品。

所以,这就是我创作实践的基础,我对人们的信仰产生了兴趣。2019 年,疫情前,我与纽约大学的工程学院合作进行了一项关于深度伪造(deepfake)的项目。我想知道这些新技术究竟能做些什么,它们是否危险,是否会产生更多假新闻和假影像,以至于我们无法区分现实与虚假。

AI 和深度伪造项目的经历

所以我去了纽约,在那里做了这个项目,几个月后疫情爆发,我不得不回到阿姆斯特丹。经过了一段时间,到 2021 年底或 2022 年,我完成了项目,虽然是在远程合作和寻找新的工程师合作的情况下完成的。这个项目在荷兰的里克斯博物馆展出。这个项目的一个部分是参观者在展览空间中走动,我们设置了 IP 摄像头,实时生成访客的数据集。如果你靠近这些摄像头,你就有可能被深度伪造。因此,简而言之,如果你参观了展览,摄像头就会生成你的数据集,如果达到我们制作 deepfake 所需的基准,半小时后你会看到自己的影像出现在我的童年视频中。这种情况引发了我对AI的兴趣。

探索生成式 AI 的潜力

你提到你对阴谋论和深度伪造的兴趣,你能谈谈是什么引发了你对AI作为一种艺术探索可能性的看法吗?是否有某种经历、技术或能力的瞬间让你对深入研究这些AI内容产生了兴趣?

事实上,我在深度伪造项目时就意识到这一点,那是我最初感兴趣的项目。那时我对AI的兴趣并不大,但我与更多具备专业知识的人合作,因此,我的作品往往是和AI工程师合作进行的。在这个项目中,我与 AI 工程师 Bram Van Ness 合作,他在 Utrecht 医疗中心工作。我们主要的工作是使用AI更好地理解疾病,并提出医院可以用来解决各种问题的应用方案。能够近距离看到他们如何使用AI,看到他们计算机的潜力,这让我感到非常着迷。实际上,某个时候我开始怀疑作为一名艺术家的自我,觉得编程人员将来可能会成为艺术家,因为只需要计算机和编程技能就可以制作任何东西。

对未来的展望

关于这一点我当然有我的想法,我希望未来的沉浸式艺术能够充分利用AI的潜力。正如我所说,AI的生成能力越来越强,它可以在更高的层面上影响艺术与创造的方式。尽管还有很长的路要走,我认为五年后我们会看到更多有趣的探索,但我也分享你对真正人类表达和经验的重视。

结语

我觉得我和你的观点是相近的。我希望在我的作品中强调人类的参与和创造。AI 只是一种工具,它帮助我们表达对当今世界的看法,而不是取代我们。感谢你的时间,希望我们能更多交流。

感谢你再次收听《Voices of VR》播客。我鼓励你支持我在这里所做的工作。已经过去十多年,我进行了1500多次采访,所有内容都可在 voicesofvr.com 网站上找到。如果你喜欢这个内容,请考虑加入我们,支持我们运营这个项目。谢谢收听!