Voices of VR 播客
大家好，我叫 Kent Bye，欢迎收听 Voices of VR 播客。
今天我们有 Robert Hernandez，他是南加州大学安尼伯格的数字新闻学教授。他简直就是新闻领域的创新实验室。他和他的学生们一起探索这些新兴技术，试图了解这些技术能够做什么，潜在能够解锁哪些新的叙事能力。他一直在与学生们合作，使用增强现实技术和 360 视频。他们实际上创建了这些摄影测量 Snapchat 滤镜，其中包含无家可归者生活地点的摄影测量扫描，结合一些交互音频，提供这种空间的导览。今天我们就来和 Robert 讨论一些这些新功能，以及他在 USC 与新闻学生们的工作。
这次采访是在 2018 年 5 月 2 日星期三，于加利福尼亚州圣何塞的 F8 大会上进行的。那么，让我们开始吧。
Robert Hernandez 的介绍
你好，我是 Robert Hernandez，我是南加州大学安尼伯格的数字新闻学教授。我的专长是将新兴技术用于新闻报道和非虚构叙事。我在 USC 工作了快 10 年了，在 2013 年开设了一门增强现实新闻课程，2014 年开设了一门 Google Glass 可穿戴设备课程，而自 2015 年开始每个学期都教授 360 VR 沉浸式新闻课程。我的学生和我以 Jevurnalism 的名义生产内容，不过“J” 用的是“v”，代表 VR。你看我们玩了个小花样？这并没有注册商标。哦，是的，之前曾经是个爱情故事，我不情愿地展示出我签的网站，而 VR 新闻似乎并不适合作为商标，所以我的天，这太糟糕了。我给学生们看，他们都喜欢，所以我们由此制作了沉浸式故事，与 ProPublica、《纽约时报》、NPR 和 NBC 合作。我们做了各种不同的故事。在过去几个月里，我还能够带我的学生们去南韩，制作关于冬季奥林匹克运动会的故事。我们做过一篇关于萨尔顿海的故事，和《今日美国》中的《沙漠太阳》合作，讲述萨尔顿海如何死去，导致环境灾难。现在本学期，我的学生和我还在制作关于被驱逐者的沉浸式故事。在春假期间，他们和教授去了墨西哥的蒂华纳，采访了来自不同背景的多位受访者，讲述那些被驱逐和他们背后留下的人的痛心故事。
实际上，我们也在做突发新闻，对吧？我们分别报道了总统就职典礼和女性游行。就职典礼和女性游行与《纽约时报》及 NPR 一起报道。在这个周末，我和学生们虽然课程结束了，但决定再次前往蒂华纳，去报道从洪都拉斯走向美国边境的移民大篷车。那时，他们正在做那场大步走向边境以寻求庇护的活动，我们拿着 360 摄像机去捕捉这些时刻，由 NPR 发布。那段视频在 Facebook 上获得了 250,000 次观看。所以我们的努力是有成效的。我们正在让自己的名字被更多的人认识，并获得新闻机构的认可，还赢得了奖项，这一切都要归功于我的小课堂，就像是“能行的火车”，我们是早期采用者，不断实验和推进。
关于新叙事媒介的讨论
太棒了！我很好奇，作为新闻教授的你如何看待传统新闻方法与这些新兴技术之间的关系？假设一则故事中，VR 作为中介如何能够涵盖到那些通过传统印刷、视频或播客等形式无法呈现的故事维度？
所有这些都在重新定义中，对吧？我参与了 Google 新闻实验室关于从讲故事转向故事生存方式的研究。以他人的角度体验生活，这在这个媒介中至关重要。沉浸其中，与某人保持存在感，使你更好地理解他们的视角。你可能无法一对一地理解在难民营中生活的小女孩的生活，但这项技术使你比照片、视频或音频更接近于她的生活。这也解锁了许多道德挑战，这为我们讨论如何讲述故事提供了生动的课堂，尤其是无论技术或平台如何，我仍是一名遵循伦理规范的记者，我需要诚实和负责。从任何方式来讲述故事，都是可以的，因此，如果我必须使用 Snapchat 滤镜、360 视频或纸张加文字来传播故事，我们都会使用。同样，在这个过程中，我们也必须进行这些对话。简单的对话，例如三脚架应该多高？因为这个高度能够在你看待一个人时传达出微妙的信息。当你用摄像机拍摄比你矮的人时，摄像机的高度高于被拍摄者，反之亦然。此外，我们的第一个项目是与 ProPublica 合作，他们让我们与他们共同讲述休斯顿船运通道如何在飓风即将来临时变得毫无防备的故事。我们讨论了故事的不同角度，他们让我们在故事出版前阅读，学生们分析了各个角度，而有一个学生的评论引起了我们的关注。很多人并不了解暴潮的影响，而超强飓风桑迪就发生在不久前，有人曾评论天气服务称：“如果我们称之为海啸，人们可能会更关注。”所以我们想，也许我们可以用 VR 来解释暴潮，并且也用它来展示规模。
科学家们预测将出现一个 30 英尺的水墙飓风暴潮。因此我们讨论如何在 VR 中展示这种经历。学生们开始思考“如果我们把你放在一个房子里，你看到雨和风，突然听到屋顶被掀掉的声音。”我在这里打断了他们，告诉他们，那对好莱坞来说不错，但我们在做新闻 journalism，如何将其简化到事实层面呢？我们提炼到规模层面，使用“用香蕉作为尺度”的标语作为参考，于是在春假期间，我们去了休斯顿，找到了一处面对水域的空地，进行了 360 度捕捉，并以此作为基础，然后引入了 CG 元素，首先呈现这个邻里现实，接着在你面前建了一座 CG 房子，之后我们从现实 360 转入完全 CG，并且水墙冲来。第一个水墙是代表伊克飓风以 10 英尺的标高产生的水墙。然后，你对比旁边的房子，再一次，房子是“香蕉的比例”的隐喻。然后你会意识到“这可不行”，按照科学家的预测，30 英尺的水墙从附近而来，瞬间你就会明白了，这简直是“绝境”。我们不需要摧毁这栋房子，也不必考虑建筑的强度，只要看着水的波峰便能明白这些都是传递的信息。我们在这里讨论，不仅是关于我们现在涉及的被驱逐者的故事，以及如何讨论那些深刻的机会。当我们不在房间里进行访谈时，该怎么描述被驱逐的经历呢？
技术与伦理的界限
是的，我确实看到 Fran Pichetteza 的 6 by 9。当然。这个项目来自《卫报》，在该体验中，Pichetteza 试图处理一手叙述和访谈。她发现在 VR 中沉浸于孤独监禁的体验时，若是聆听他人经历时会使你脱离自己的体验。于是，她将叙述视角从第三人称转换到第二人称，使得访谈者能以你即将经历的方式进行叙述。而所有的内容都会与你所处环境紧密相连。这种叙述方式几乎能聚焦于如何将一段经历翻译，使得经历者能拥有自己的直接体验，而音频有助于你与环境——这样的忐忑陌生感有所连接。在这种叙述之中，我们正在发现这是一种全新的叙事方式。
当那些拥有广播培训的学生在撰写剧本时，我不得不调整他们一些措辞，让他们将 “在美国与墨西哥的边境” 改为“这里是美国与墨西哥的边境”。因为被摄者可能会将左侧的人视作在寻求庇护的群体。这对我们来说就像是对故事进行虚拟之旅的一种尝试。实际上，Facebook Spaces 是我一直在思考的，用于提供一个故事的虚拟旅程。因此，将 360 度照片或视频导入这个空间，我作为你们的新闻引导人可以告诉你：“右边就是 El Chaparral，你看到的转圆闸门是你从美国边境出去时最后见到的东西，而你面前是未知，你将要面对的城市和国家，你可能对此国有，也可能没有任何关系。” 我们就是这样讲述那些故事的，但要在其中呈现出一个活生生的声音和引导，这与传统新闻观或我们所做的，见证并且不加任何引导的方式都截然不同。你消费，而我们却在有选择地引导你。
结束语与思考
我听到你说这些时，不禁感到兴奋，因为我想像着在增强现实和虚拟现实中，故事正在从人们的经历中叠加出情感的架构。在这情感显著的点上，人们正经历着通常所经历的情感，我认为您刚刚给出一个非常漂亮的隐喻，比如说，未知就在你的面前，虽然对人们来说这仅仅看起来是块平地，但你知道那代表着人们所经历的情感，这个体验的深层含义和故事，正通过空间的不同架构与人们连接在一起。而我想象着通过 Google Earth VR 以及增强现实，我们将开始有更深层次的历史叙事与人们的共同体验与集体的故事，融合在一起。
我喜欢你提到增强现实，正如我提到的，我最初与增强现实打交道。我们实际上使用 360 视频作为我们增强的画布。我们无法在 360 中进行困难的访谈，这并不合适。因此，我们进行传统的DSLR访谈，从相机后面保持眼神交流，与受访者交谈。然后我们将这些传统的DSLR经验带入空间中，也许世界会变暗或转换为插图——这就是我们这个学期正在尝试的。或是仅仅让他们的声音与照片出现。我们尝试增强这些 3D 360 空间，让你能够聚焦于不同的经历，或在某个时刻、他们的声音或位置上。
这门课的挑战是，尽管我们在做很棒的工作，但每个学期我都在重新启动，带来15位没有任何相关经验的新学生。我告诉他们：“这是台相机。我自己也不知道如何编辑视频，但我们会想办法一起解决。”这就是我觉得这门课最令人激动的部分，它把来自电影、工程、视频游戏开发、新闻、公共关系和心理学等不同背景的学生汇聚在一起，看看如何使用这项技术来讲述有意义的故事。随着技术的迅速发展，这为讲述故事带来了新的机会和新方式。我对自己即将进行的项目非常兴奋，这是为了使用增强现实的沉浸式摄影测量视频，来讲述洛杉矶无家可归者的故事。这是我们正在尝试的新项目。我希望能学会摄影测量，我希望 Facebook 有一个更简单的解决方案，但我想知道我如何能够劫持这项技术，不是作为噱头，而是要让你与那些你希望忽略的话题保持联系，也许在你开车经过的时候，你锁上了车门没有与视线相遇。这个正是新闻的角色，在这些故事中提供人类的语境，如果我能够利用技术和这些来自多样学生的创造头脑向前推进我们真的是非常幸运。
我与 Realities.io 进行过一次采访，我知道 Balbondian 一直在进行很多摄影测量。我知道有一些工具，只需拍摄大量照片，然后在后端进行后期处理并清理。但在与 realities.io 的交谈中，我看到了能够进行这些空间档案化的潜力，实际上有些短暂的艺术或仅仅表面的东西，必须被捕捉下来，以便以后可以引用。因此，档案性质的这一层次在我看来是我看到新闻的一个重要组成部分。我认为，看看 Gabbo Aurora 关于大屠杀的位置的 最后的告别 ，很有趣，他们做了大屠杀遗址的摄影测量，然后在此基础上，将某种二次贴图的 3D 视频叠加在上面。从本质上讲，只有大屠杀幸存者的虚拟导览，他讲述了在这个地方的经历，而他与一个虚拟角色或视频出现，其中也体现出一种档案化和人类叙事的潜力。
是不是很有趣? USC 大屠杀基金会一直在开发自然语言处理和视频摄影测量，以捕捉大屠杀幸存者的口述历史，因为当他们都去世时，否认者会说“证据在哪里？”因此，他们一直在记录这些资料。你可以 Google “新维度和证词”，看看大屠杀幸存者 Pincus 的小视频。至于参与者，他我认为与 USC 开发的交互式口述史的相同，通过询问问题来获得他的回答，然后他会作出回应。我一直对此感到着迷。那显然超出我的智力水平，如何将自然语言处理和全息图捕捉及视频摄影结合在一起。但底线仍旧是讲故事与人际连接。对吧？我告诉大家，我和 Noni Della Pena 竟然在同一时间被 USC 雇用。我常常讲的故事是，她和我曾一起指导一期关于如何更数字化的杂志课程，该课程报道了食品沙漠以及经济萧条如何导致人们前往食品银行。我记得我正在指导她如何使用 WordPress、数据可视化或音频幻灯片。而我记得 Nani 曾说：“如果你能让人们感受到在食品银行排队的感觉，那会是非常强大。”我记得当时我心想，Nani，我们只有 15 周呐，你在说什么？她花了一年时间，但最终提出了这个项目，后续是在 Sundance 电影节上展出， Parmalechi 参与了这个项目，最终导致了 Oculus 的创建。
我指出，两件事非常重要。技术早就存在了，这并不是一个新的 VR，这一直是对技术的失望与承诺，但通过讲述人际关系这样的故事，使其引人注目。第二件事，重要的是，Nani 是一名记者，Palmer Lucky 也是。当他去找 Long Beach 时，他的角色就是把故事讲好。这就是我们做的事情，都是极其重要的，讲故事和技术将彼此支持，而这也与创造力与影响力紧密相关。我们了解我们必须从中获利，但在新闻领域，尝试找出仍旧在过去的平台中探索如何才能让这些很酷的设备与更有意义的事情结合，才是我作为记者和教授的乐趣，通过将所有不同的学生聚在一起，探索“我不知道，但让我们在这个学期找出解决方案”。
结束与回顾
这是一个引人深思的交流，对吧？我完全同意，讲故事仍然是新闻所需的方式。我的感觉是我正在进行的这类新闻，更像是基于黑格尔辩证法的对话与辩论。我其实在充当一个口述历史学家，同时又与社区分享这些信息，而这个社区在听，并且我们继续进行这种虚拟化的交流。而这是一种没有计划和时间表的探索，我仍然不清楚完整的故事是什么。有一个例子，我报导了有关 Upload VR 案例的主题，同时恰好也被《纽约时报》记者报道。这有点像《纽约时报》的报道方式是，他们必须先确定故事是什么，然后才会指派记者去报道。而实际上记者没有很大的自由决定自己报道的故事。在纽约市有一个人在决定故事是什么。
但我在前线的感受确实深刻，真实的故事当随之而来，我对讲故事的危险略有保留，感觉是想知道故事的形状在开始时就已经存在。这是多元叙事和讲故事的美，很多不同类型的故事，正是美在这里。所以我认为你跨越了真正的历史与发掘人的故事之间的界限，受惠于你为社区服务的工作，非常感谢你，继续努力！这与我所需的截止日期报告极为不同，不论发生了什么，我都需要去进行报道。
有趣的是，在互联网成为主流之前，报纸盈余丰厚，记者们并不需要死赶截止期限，而是可以自由到城市转悠。过去，他们与市民闲逛、闲聊，试图了解城里的脉搏，故事就这样引来了。但随着预算的缩减，以及底线变得比完整的社区覆盖更为重要，记者们的工作变成了事件发生后迅速报道。几年前，我在来 USC 之前的整个职业生涯都是一名数字记者，我曾在《西雅图时报》担任发展总监，领导一支工程师和设计师团队。我参加过一场30岁以下记者的聚会，饮酒聊天，讨论自己的经历。一位商业记者谈到，编辑在早上 10 点时进来，看到所有的办公室都坐满了记者。编辑说：“我很高兴你们今天上班了。”在好记者的眼里，写得好的新闻是空荡荡的办公室，意味着记者们都在社区外面进行实地报道，而你无法仅仅依靠谷歌搜索、推特或电子邮件去报道社区。你必须去那里，与人们互动，受益于社区，才能让社区也受益于你，我认为你代表了这种参与型的真正形式。
在《纽约时报》中做这事的难度是多种多样的，非常感谢你有这样的故事发生。此外，我正想起，当希腊人两种时间的概念时，Kronos 时间是所有安排好的，预先计划的，每件事情都是有事件发生时你的反应。而 Kairos 时间则是更为主观、更定性的时间，你在环游、倾听，以至于更深层地聆听的时候，人的经验中所感知到的质量。１２我们很容易在会议上漫游，不必安排太多，对于我们来说不同的精彩对话的发生与我们在一段时间内的深度倾听是相关的。
我感受到我们在某种程度上，文化上产生了这样一种转变，所有的新闻报道似乎都在Kronos方向上下波动着。但是我觉得播客这一媒介确实是适合二者的，而我怀疑虚拟现实在此方面也可能是，这种强烈的“哦，我恰好在这个时候在这里”，你知道这是一个瞬间，在这个瞬间捕捉的故事在将来，故事或许在围绕其构建。这都取决于技术，正确吗？为了捕捉移民大篷车，我需要给我的相机充电、加载所有电池、整理装备、准备好三脚架，前一天见面分配“你背这个背包”，“猴子拿点零食”， “带点水”，所以它并不是即兴发挥的。我可以拿出手机捕捉这个瞬间，推特发布最近飞入哈德逊河的飞机。但我们会逐步做到，前置摄像头与后置摄像头将成为鱼眼镜头，且能够拍出完整的360度影像，因此我们能够从360度图像中，产生真实的摄影测量图。我们可以通过房间内的360度图像，再来制作一个真实的 3D 错综复杂的图，当然我希望这项技术迅速应用，有更高效的叙事方式，再通过数字技术的叙事故事推进我们的实际操作、动手体验与创造过程。
Robert 的终极潜力
最终，请你分享一下你对虚拟现实的终极潜力以及它可能开启的方向？
这是一个重要的问题。对我而言，我是新闻工作者，所以从我的角度看待这一切都是沿袭这个思路。在我所谈到的这些经历中，我所追求的是，转变为某种我无法达到的存在，那就是非虚构体验，帮助我更好地理解我的社区，不论这个社区位于我自家附近、或者是地球另一端我从未造访、甚至用另一种我无法理解的语言进行交流，但通过这项沉浸式技术所构建的人际联系，是如此之强大。
非常感谢你。听你说的每一段内容都令我感动，《Voices of VR》也让我感受到了坚实的支持。请继续关注我们的内容，并留意我们即将播出的计划。
谢谢你收听 Voices of VR 播客。如果你喜欢这个播客，请告诉你身边的朋友，考虑支持一下 Patreon。我确实依赖于我与你们的关系，才能坚持这项工作。今年我有很多重大的计划，很希望能得到你的支持。
你可以在 patreon.com/voicesoftvr 成为会员并捐助，谢谢你的收听。