The Voices of VR Podcast

你好

我的名字是 Ken Pai，欢迎来到《虚拟现实之声》播客。今天我们继续报道2022年南方西南的内容，今天的节目聚焦于一个名为“未来的权利”的原型项目。今年在南方西南有许多不同的原型，这意味着这基本上是对尚未完全成熟的项目的初步预览。这个项目还有很多工作要做，以便呈现完整的体验，他们希望能够获取一些反馈，以了解这个项目能发展到什么程度。

“未来的权利”是由 Sandra Rodriguez 和 Alexander Whitley 创作的一部作品，是《春之祭》的一部分，这是一部著名的芭蕾舞作品。他们在虚拟现实中捕捉芭蕾舞者，并且使用感知神经元套件进行捕捉，并没有完整的 6 自由度跟踪，这些数据被转换成一个人跳舞，然后是整个剧团的舞蹈。因此，你可以沉浸在这些环境中，看到舞蹈在你周围发生，但也鼓励你在这些体验的背景下移动，进行自己的舞蹈。这真的很有趣，看看他们如何将现场舞蹈带入一个共享环境中，让有人真正跳芭蕾舞，然后将所有这些数据流入一个沉浸式体验。

与团队的快速对话

我有机会与这个团队进行一次简短的对话。在每小时进行一次采访时，我能够抽出一些额外的时间进行简短的采访，来介绍这个名为“未来的权利”的项目。因此，这就是我们在今天的《虚拟现实之声》播客中要谈论的内容。与 Sandra 和 Alexander 的采访在2022年3月15日星期二进行。接下来，我们直接深入这个话题。

Sandra Rodriguez

我叫 Sandra Rodriguez，我是沉浸式 XR 和越来越多以 AI 为主导的体验的创意总监。

Alexander Whitley

我是 Alexander Whitley，我是一名编舞者及 Alexander Whitley 舞蹈公司的艺术总监，我们在舞台、虚拟现实、增强现实以及所有数字空间之间制作表演作品。

深入了解彼此的背景

我很想听听你们各自的背景和你们进入这个领域的旅程。

Sandra：我曾在虚拟现实体验中工作，我越来越希望人们能够利用身体在虚拟空间中的便利。一个键盘，并不仅仅是让他们感受到一些我们听到过无数次的关键词，比如存在感或沉浸感，而是真的让他们感觉到他们的身体可以成为故事的一部分。他们的身体成了讲故事的工具。我参与过以 AI 为主导的体验，在这些体验中，我们要么质疑人工智能，要么讨论它的潜力。在这种情况下，它确实是隐藏在背景中。目标是利用这个新工具的优势，这一次是人工智能，看看我们如何能够增强我们的动作，使其与音乐和编舞语言相匹配，试图看看这会将我们引向何方。

Alexander：我的背景是在舞蹈领域，作为一名表演者，我大约十年前成立了自己的公司，特别关注如何将数字技术与舞蹈结合，最初是探索如何将运动捕捉引入舞台背景，并建立表演者与互动视觉之间的关系。多年来，随着技术的发展和互动机会的出现，这确实引导着我走向许多不同的方向。我特别对虚拟现实感到兴奋，因为它能够在三维空间中跟踪运动，并提供对行为的视觉反馈。

探索新的体验

我感兴趣的一件事是这些技术如何扩大对基于运动的体验的可及性，这种体验背后的概念在舞蹈和编舞中往往存在一种恐惧或固有的模糊性，关于如何通过身体而非语言来传达想法。对很多人来说，标志物并不十分明确。这是一个问题，因为他们不知道如何与此互动或在理解发生了什么时该看哪里。还有，如何言语描述基于运动的体验或讨论运动中的工作概念的问题。而互动技术的潜力在于能够真正绕过这个问题，以一种三维空间中行动的方式进行运动和表现，然后根据所获得的视觉反馈提出行动的建议。

希望通过使用这些技术，我们可以让公众和观众更加贴近舞蹈体验的核心，使其成为参与式的体验，而不是更传统舞台设定所提供的消极体验。

在这种情况下，我们是针对一部经典的舞蹈和音乐作品进行探索，这部作品有超过100年的历史，探讨如何利用这些现代工具为其注入新活力，真正为人们以一种不同的方式体验它打开大门。我认为重要的是要提到这仍然是一个原型。但是，我们收到的反应让我感到非常震惊。几年前，当我们想要进行一部关于舞蹈中的 VR 的作品时，反馈是：游戏玩家想要的 VR，所有的事情都围绕着游戏来进行。所以如果你能将舞蹈游戏化，那好，他们会想要它。但随后，《节拍剑》变得非常受欢迎。它不需要你知道如何跳舞，它只需要你知道如何跟着节奏移动并且进行了游戏化。

那么其他的体验呢？有非常优雅的体验可以在基于位置的场所中展示，我们看到这些也确实很好，但它们针对的是不同的公众，这个公众正在重新定义剧院，重新定义现场表演。他们想看到现场舞蹈表演的未来。但我们坚信，当我们第一次见面时，我们坚信两者之间存在联系。我最大的收获是我从未见过如此高大、肩宽的男人跳芭蕾舞。吸引他们来到这里的不是因为他们想要跳《春之祭》，也不是因为他们想跳芭蕾，而是他们把这个视为一种体验，在这种体验中，他们的身体成为了他们所创造的世界的一部分。随着体验的推进，我拍摄了许多他们的舞蹈，他们变得更自在。

AI 的潜力与舞蹈体验的未来

我们开始的承诺是通过 AI 进行原型设计。AI 是一个关键字，正如我之前提到的，它实际上隐藏在后台。这并不是我们在这里测试的内容。我们在第一个原型中测试的是我们称之为舞蹈自动调音系统的东西。因此，我们不想让人们退缩，说：“好吧，有个表演，我无法像表演者一样跳得好，或者，如果它没有节拍，就像《春之祭》不是有节拍的音乐，我怎么能跳舞？”

这个体验是这样的，也许只是手臂的一挥，也许你只是抬起双手。但是，我们是否可以让你的虚拟形象的手看起来似乎更延伸，或者一种据点的节奏性？当你感到自己在操作这个虚拟形象时，我们会给你带来一个把戏，因为我们在推动你让你更舒适地进行舞蹈。因此，这就是第一个原型的目标。

我们开始在封闭期间创造这个，并认为这是体验的目标，以测试舞蹈自动调音系统的极限。但我们很高兴我们开始解封了，再次让我们能够有现场表演者，而现场表演的价值现在真的需要被测试：这些是否都可以提前录制？如果有一个现场表演者，人们的舞蹈是否会有所不同？所以这是第二个原型的目标。原型分为两个部分，第一部分和第二部分。第二部分真正帮助我们测试和评估人们对现场表演者的反应，而到目前为止，我很高兴看到人们在那个空间中的移动。

因此，我认为这是对编舞的赞扬，因为他们是编舞，但同时他们感觉自己是其中的一部分。我认为我们建立了那座桥。

在我所看到的许多舞蹈作品中，有一个问题是如何质疑现场表演的“现场性”。我感觉在这部作品中很难做到这一点，因为舞者的缺乏 6 自由度跟踪，也因为我作为一名舞者，身体有点固定，像是我在这个世界上的一个镜像，但也没有在一个强劲的方式中移动。固定在一个位置的方式消除了很多成为个体的可能性，而这使得这个体验感觉更机械化。当我看舞者时，看起来非常优雅，但当我进入 VR 时，那些优雅在固定在一个点时变得失去了很多。

因此，我觉得得到一个允许 6 自由度运动的跟踪系统，并且思考如何建立一个镜像或说服大家，这正在发生的是一个人。最终，可能这可以是 AI，这将像图灵测试一样，测试你如何知道它确实是一个人，他们在回应你。至少现在，有些东西可以分辨出哪些是更具人性化的，哪些是更机械化的。我觉得这可能是其中的一部分。但，关于现场性的质疑，毫无疑问这是让像这样的作品从原型阶段走向完整发布的一个重要部分。

当然，显然这是我们目前在相对原始或直接的技术设置中工作的一个挫折。我们在表演者和参与者之间建立的关系种类方面有着真正的限制，但显然希望在长期内我们能够拥有更大、更加稳健和精准的跟踪系统，真正使我们能够牢固建立并与这些关系合作，因为这也是创造这种体验背后最强烈的动机之一，即感受表演者在你周围的亲近和存在，知道他们的表演是对你有反应的。

因此，在 AI 的使用和 VR 的所有互动可能性中，总会存在一种机器智能和反应的元素，但围绕你身边舞者的非常人性化的反应，以及在这些不同可能性间的切换，希望将创造出一个非常引人入胜的元素组合。在这样一部作品里，这其中包含了异教文化和仪式的主题，地球的舞蹈。很多事情都是非常扎根于地球，很多动作捕捉和 VR 往往会让你远离这些。你失去了与地面的连接感，当然，这样的东西看起来可能会有些奇怪和机械化。

因此，我们要做很多工作，努力绕过这些技术性限制，寻找创造性的方式，尽可能使其与构成制作主题的那些主题保持真实。我们昨天有机会讨论运动捕捉套件，以及如何使用实时运动捕捉和 VR 的体验。确实，在尝试更准确的像 OptiTrack 套件时，数据会更好，视觉效果可能更真实，但这对系统的负担极大。这对实时需求的使用非常困难，尤其是在一个无缚的头戴设备中。因为我们想要所有这些发生，我们决定：“好吧，至少这个系统更快更快，以前的准确性可能不够，但是创造性的解决方案可能就在他们穿着的服装中。有些服装并不需要身体运动非常准确，它们看起来像大玩偶或巨大木偶，这使得用户的大脑能够理解并接受它们以那种方式移动。

因此，我们真的在推动离现实远去，我认为这经常被问到，动作的美感可以和需要是现实的。我们认为，不一定如此。舞蹈并不是关于现实的，而是在通过运动成为故事的一部分。我在说这些话时又在移动，谈论舞蹈和运动而不跳舞是很难的。因此，这是以不同的方式生活音乐，并通过你的身体去体验。为此，有许多创造性的解决方案可以探索，这并不是关于准确性或现实；我认为这就是我们在探索中的乐趣。

原型的发展与舞蹈民主化

我们提到这还是一个原型，我们会不断提到这一点，因为与我所工作过的其他原型相比，这些原型更像是序章，比如作为第二章的第一章，更加精致。在这种情况下，因为我们真的在封闭期间都在工作，所以我们以增量的方式推进。我们为第一个原型筹集了小额资金，建立后端，利用后端又为下一个原型筹款。我们现在正在建立与舞者的关系。但我认为这有助于创造一种体验，符合我们对彼此的承诺，全部是关于舞蹈的民主化。因此，我们越是与人们分享，越是学习他们对虚拟形象、舞者、表演者的反应，我们在创建时也在以他们的移动和他们对是否有现场人一起参与的兴趣来进行构建。

所以我全神贯注地听取你所认为的反馈有哪些有效和无效，因为这正是我们在这里测试的内容，并希望这将有助于我们构建第一个迭代版。《春之祭》是一个35分钟的体验，我们尚未达到11分钟，所以我们看看这将把我们带到哪里。

展望未来与感谢

很期待看到这个项目的进展，并检查更新。我相信我会再次看到你们，并得到更多更新，能够更深入地了解整个旅程过程。非常感谢你们的快速更新，我期待看到未来的可能性，现场剧院、舞蹈，以及这个 AI 背景的发展。

本期结束总结

非常感谢你们。

很高兴做这次对话。

所以，这是来自于 Sandra Rodriguez，她是沉浸式 XR 和 AI 主导经验的创意总监；还有 Alexander Whitley，他是 Alexander Whitley 舞蹈公司的编舞和艺术总监。我从这次采访中获得了几个收获。首先，这是一个拥有许多技术创新的项目，能够通过这些更具 3 自由度的传感器进行现场流媒体传输。这意味着你没有完全 6 自由度的表现被投射到这个体验中。我认为这可能是我最希望看到的事情之一，确实感觉有另一个人在那里，而不是只是感觉像是什么更机械化的小木偶。

因此，我不知道这是技术限制，还是缺少完善的运动跟踪技术，无法在这些舞蹈中完成全身跟踪。但我在现实中看到的芭蕾舞是美丽的，而这并没有以同样程度传递到我在外部所看到的。在沉浸式体验中，当然你有这个整体的场景设计和这些沉浸式的服装，但在沉浸式表演方面，我真的希望以一种能够让人明显感受到这确实是一个人的方式来看到这个舞者。同时还有对现场性和活生生的体验中的质疑。

Sandra提到的自动调音舞蹈的初步阶段，我很想在这个体验中看到更多。这意味着当你看到虚拟的表现时，这如何改变你移动的方式？这是一个非常引人入胜的项目。因此，我期待看到这个项目如何继续发展。正如 Sandra 所说，它仍然是一个原型，仍处于早期阶段，这是一个初步的窥视。这个作品实际上非常引人注目，我看到许多不同的记者对此进行了报道，因为这是一种 Alexander Whitley 舞蹈公司与虚拟现实中的舞者们之间吸引人的合作。

请继续关注，期待看到这个项目的进一步展开。

今天就到这里，感谢你收听《虚拟现实之声》播客。如果你喜欢这个播客，请传播给你的朋友，并考虑成为 Patreon 的一名会员。这是一个需要依靠像你这样的捐赠者来持续为你提供这一报道的播客。你可以今天在 patreon.com/voicesofvr 成为会员并进行捐赠。感谢你的收听。