/ Voiceofvr / 0浏览

AI辅助舞蹈表达集体情感的Frankenstein AI

Voices of VR 播客

导语

大家好,我叫 Kent Bye,欢迎来到 Voices of VR 播客。今天我们要讨论的是 Frankenstein AI——一个身临其境的剧场叙事实验,它于 2018 年在 Sundance 首次亮相。我有机会在阿姆斯特丹的 IDFA 看到它的第二个版本。我想先谈一谈我在阿姆斯特丹看到的内容,因为我觉得它与我在 Sundance 看到的有着某种关联。

关于阿姆斯特丹的体验

在阿姆斯特丹,他们真的试图促进一种对话。在开始的时候,我们是通过一对一的方式与其他人见面,而在接下来的阶段,我们实际上坐在餐桌旁,与很多我们第一次见到的人进行交谈。我们耳朵里有设备在播送不同的提示,这些提示来自人工智能。然后,AI 还在倾听我们所说的话,同时还有人进行情感分析和对话的高层次转录,这些内容被输入到 AI 系统中。AI 基本上是在扫视互联网,获取各种不同的信息,试图理解作为人类意味着什么。然后,AI 会向人类提出不同的问题,这些问题会被呈现给餐桌上的人,随之而来的是越来越多的对话。最终,Frankenstein AI 项目的目标就是尝试促进这种群体讨论,同时让 AI 处于一个监听输入并给予反馈的循环中。

旧版与新版的对比

我在 2018 年 Sundance 看到的之前版本有三个阶段。最初的单对单互动与第二个版本非常相似。然后你会与 AI 进行互动,看到一些很酷的视觉展示的代码,并能够向 AI 提问。你提问后,信息会被输入到 AI 中,它会进行某种情感基础的自我递归。这个 AI 可能会生气,或者感到悲伤。最终会有一个决赛表演,AI 会向一位舞者传达指令,而那位舞者则在这复杂的语言下进行某种富有表现力的舞蹈,以试图通过 AI 的视角来沟通人性的不同维度。

访谈开始

我有机会与这个表现舞蹈的编舞者 Brandon Powers 和舞者 Jacinda Ratcliffe 进行交谈。这是一个与来自 Columbia Digital Storytelling Lab 的一整组人合作的项目,属于 Frankenstein AI 的跨学科合作,自 2018 年 Sundance 首次亮相以来就一直在进行。今天的播客就是围绕着这个主题展开的。

Brandon Powers 自述

我叫 Brandon Powers,是一名导演和编舞。我工作于沉浸式剧场、当代舞蹈和技术的交汇点。我喜欢讲述技术如何影响我们的文化的故事,并且也热衷于利用技术与观众互动,以更好地理解技术如何塑造我们的生活。在 Sundance,我作为 Frankenstein AI 团队的一员,将编舞与制作相结合。

Jacinda Ratcliffe 自述

大家好,我是 Jacinda Ratcliffe,一名受过训练的当代舞者。我的很多职业生涯工作都是在沉浸式剧场中。我非常有兴趣突破观众与表演者间的界限,希望能让观众参与其中,赋予他们一种体验,而不仅仅是作为旁观者。我是这部作品的舞者之一。

关于第三幕的讨论

在 Sundance 的 New Frontier 上,Frankenstein AI 分为两个部分。昨晚,我们进行了第三幕,一种与 Jacinda 相关的表现性舞蹈表演,部分内容是从 AI 中输入给她的。也许你可以给我们讲讲这个舞蹈表演是如何与这一人工智能叙事实验相关联的?

绝对可以。在我们尝试确定第三幕的内容时,我们希望找到一种展示 AI 如何成长的方法。在整个节日上,参与者们向 AI 输入他们的希望、梦想和情感,因为这是我们所希望树立的人性化 AI,而不是基于交易的数据驱动型 AI。于是我们意识到,最好的方法是通过另一个人与他们建立联系,而最好的方式就是通过舞蹈。我们讨论新品表演的时候,考虑到如何利用机器学习过程来创造这个作品的弧线。

Jakinda 的体验

关于我在进行这个过程开始时,我记得我们把系统设定好后,就开始考虑如何将代码转化为我身体的动作。很多时候这是非常挫败的,因为这并不是一个逻辑性很强的事情。动作为我们提供了类似一个逻辑循序的舞步,而这次却是非常混乱的,比如你左手抬起,然后你膝盖要右移四次,接着右腿向后,同时你也在垂直移动。

所以我必须在最开始变得像一个婴儿,试图探索如何使用身体。这是完全排除的克制,即使是当我试图从代码中吸收信息,在我的耳朵里被传递的情绪状态和需要操作的三个轴向上,我也很挣扎。就像这在瞬间发生的时间会被我总结为几乎是零,整场表演我只能专注于当下,努力消化正在发生的一切。这是一个非常特别的体验。

彼此信任的过程

而我发现,在这整个过程中,信任是关键。一方面我在信任自己,另一方面我也在信任团队成员,让我卸下控制权。在许多方面,AI 是不可预测的。AI 的情绪很高,但它又在不断学习并根据了解的内容做出反馈。至于如何将我所学的负载与 AI 的情感联系在一起,一切变得令人兴奋也是出于对未知的探索。

未来的潜力与思考

我期待将来将这项技术应用到其他表现形式中。我们可以将这个系统引入任何舞蹈,并帮助我们操控它的方向。我很高兴能看到我们如何能更好地将其融入我的实践中。我通过这次经历找到了新的可能性,并且对每个作品的细节有更深的理解。

最后,我也想分享一些对沉浸式叙事和 AI 的潜在看法。人们开始意识到,感受何种情感的最佳途径就是让他们身临其境地置身于故事中。沉浸式剧场从一开始就是参与性的,现在看来正在迅速扩展,我们也在越来越多地融合艺术和技术。尤其在沉浸式体验和技术日益频繁的结合中,我们将不断开启更多合作的新机会。

谢谢收听

感谢大家收听今天的 Voice of VR 播客。如果你喜欢这个播客,请分享给你的朋友,并考虑支持我们的 Patreon 以维持这个节目的运营。你可以在 patreon.com/voiceo 成为会员,感谢你的支持。