The Voices of VR Podcast
欢迎
大家好，我是Ken Pye，欢迎收听《Voices of VR》播客。这个播客探讨沉浸式叙事的结构与形式以及空间计算的未来。您可以通过patreon.com/voiceofvr来支持这个播客。
今天的对话是我与来自Sensorium的Matthew Niederhauser和John Rodriguez的交流。他们都参与了Sensorium和Onyx Studios，这是由Onassis Foundation支持的一个项目。他们基本上创建了一个位于曼哈顿中城的画廊空间，已经转变为一个类似黑客空间的共享工作空间，内部有许多高端的OptiTrack系统。当我在2022年Tribeca film festival时，他们举办了展示，展示了一些最新项目，恰好与Tribeca的时间相吻合，吸引了众多行业人士观看这些不同的作品。这也是展示那个社区的艺术家们如何利用这些不同技术的一个机会。
我记得看到了《Maquette》，这是一场令人惊叹的舞蹈表演，表演者是一些专业的柔术艺术家，他们以惊人的体态在舞台上移动。通过一种时间延迟的雕塑表现手法，想象一下，随着每个人在运动时捕捉不同的快照，最后将这些快照组合成一个空间上的表现。这一切都是在二维屏幕上投影的，观众面前是正在舞蹈的人们。这里有一个更大的概念，包含了现场表演的部分，以及运动捕捉技术为观众提供了一个进入媒介体验的窗口，让人们看到一个虚拟的世界，其实是在展现现实的另一个维度。
他们与多个艺术家合作，探索如何利用这些高端OptiTrack系统和技术，将其转换为现场表演，并思考如何让更多人参与到这些高端沉浸式技术中，以便实现真正的可扩展性。有些项目能够填满整个剧院，让一群人围观并享受这样的表演，包括从物理体态上进行现场呈现，同时还有由虚拟媒介所组成的层次，让整个体验丰富多彩。每个项目都在以不同方式玩味这些点子。
对话开始
这次与Matthew和John的采访发生在2022年11月14日，地点是荷兰阿姆斯特丹的Iffet DockLab。现在我们就开始吧。
Matthew Niederhauser介绍
你好，我是Matthew Niederhauser，我是Sensorium的联合创始人，同时也是Onyx的工作室研究员，这是一个位于纽约的XR制作展览空间。我的工作是创造新媒体作品，包括XR作品，无论你今天想称之为什么，我在这里参与IDFA，正在利用运动捕捉技术进行一些新项目的工作。
John Rodriguez介绍
你好，我是John Fitzgerald，Sensorium的另一位联合创始人，同时也是Onyx的工作室研究员，我们是在位于曼哈顿中城奥林匹克大厦的共享生产展览空间担任混合艺术驻留和技术总监。我们在IDFA上制作了四个展现的体验。
背景和旅程
也许你们可以分别提供更多关于你们背景和进入这种沉浸式工作的历程的背景信息。
Matthew：我从小就开始拆电脑，之后作为一名照片记者工作了几年。在这个过程中，我开始做计算摄影，拼接全景作品，这让我进入了360摄像机的制作领域。当我们成立Sensorium后，就主要专注于基于相机的沉浸式体验捕捉，包括体积摄影和光度测量等技术。我们为如谷歌、苹果和三星等大科技公司制作了大量作品，同时也创造了我们自己的项目，在圣丹斯、Tribeca大展映，现在又回到IDFA，算是第二次回归。我们是一个非常专注技术的工作室，但依然致力于新的创意和定制硬件、软件解决方案地讲述故事。
John：我主要的背景在于电影制作，尤其是作为导演和摄影师。早在2000年代中期，我对用现成部件建造立体视频图像深感着迷，开始进行DIY的投影映射，并在镜子中进行了一些视频艺术装置。我和Matthew早期参与构建GoPro摄像机和镜头，从2014年到2015年期间建立了最早的360摄像机设备，这推动了我们对沉浸式图像制作的想法。
回顾过去的活动
我知道你们在沉浸节巡回活动中相互交汇过多次，我记得在2020年的圣丹斯节上揭示了你们的一些作品，也展示了复杂的社交体验。您能谈谈Onyx工作室的背景以及它如何发展到今日的历程吗？
Matthew：自从Metamorphic以来，过去几年的经历非常疯狂。在疫情前的一个不错酒店里进行采访时，我们正在高度开发新的Onyx工作室空间。这个项目源于Karen Wong，她当时在新博物馆，是新印象的创始人之一。她提议与Onassis合作，建立一个XR制作共享的展览空间。
John：我们从早期开始，就被纽约艺术与沉浸式空间的增长深深吸引，我们很幸运早在2014年，新印象成立的时候就成为了成员。现在Onyx的愿景是如何建立一个能展现各项工作的空间，帮助艺术家们将他们的作品带到更大的观众面前。
表演项目的过程
说到表演，你能谈谈如何与合作艺术家们一起使用运动捕捉技术制作这些作品的过程吗？
John：对于每位Onyx的成员，我们都会进行一个大规模的入职培训，了解空间内的技术，同时立刻尝试了解他们的创作实践，并在此之前有项目构思。虽然我们并非每个项目都直接制作，但在某些项目中，我们更多是在介绍技术，帮助他们掌握操作流畅地进行记录。我们也看到像Lisa这样的艺术家构思的项目，最开始是关于3D打印身体形态，但最终将其转变为与舞者动作的实时CGI渲染，这充分展示了Onyx能为他们提供的空间和设备。
未来的展望
你们认为这些沉浸式技术和运动捕捉技术的最终潜力是什么？
Matthew：我认为这些技术对于未来的沉浸式体验至关重要。运动捕捉将成为更多社会沟通的核心。一方面，现在的技术依然复杂和昂贵，但随着机器学习和使用普通摄像头或手机进行运动捕捉的普及，这将变得更加易于获取。我们正在朝着体感和身体化的方向前进。
John：我很期待在不久的将来，随着这些技术的普及如何影响人际关系。因为过去的三年我们经历了许多困难，目前新技术的发展将为远程和混合的数字连接提供更多机会。
结语
感谢您收听《Voices of VR》播客。如果您喜欢这个播客，可以分享给您的朋友，或考虑成为我们的Patreon成员。感谢收听！