/ Roadtovr / 0浏览

这个“天际 VR”模组展示了人工智能如何将虚拟现实沉浸体验提升到新的水平。

ChatGPT虽然不完美,但这款受欢迎的AI聊天机器人能够访问大型语言模型(LLM),这意味着它可以完成许多意想不到的任务,比如使《上古卷轴》中的所有NPC能够进行自然对话,并回答有关这个标志性幻想世界的问题。虽然很神奇,但这是对游戏如何利用AI在沉浸感方面迈向新高度的一个有预见性的展望。

YouTuber“Art from the Machine”发布了一段视频,展示了他们如何修改备受喜爱的VR版《上古卷轴5:天际》。这个尚未发布的修改版完全让你能够通过ChatGPT和xVASynth与NPC进行对话,xVASynth是一种使用来自于视频游戏的声音来生成配音台词的AI工具。请在以下最新的更新中查看结果:

该项目的最新版本首次引入了《上古卷轴5:天际》的脚本,开发者表示这可以让计算机生成的语音与唇形同步,并让NPC在游戏事件中具有意识。虽然还有些僵硬,但它感觉像是走出怪异谷的一个重要步骤。
下面是“Art from the Machine”在最近的Reddit帖子中描述该项目的方式:
几周前,我发布了一个视频,演示了我正在开发的一个Python脚本,可以通过ChatGPT和xVASynth与《上古卷轴5:天际》中的NPC进行对话。从那以后,我一直在努力将这个Python脚本与《上古卷轴5:天际》自己的修改工具进行整合,并达到了一些令人兴奋的里程碑:
NPC现在可以意识到他们当前的位置和时间。这为ChatGPT能够根据游戏世界动态地反应而不是等待玩家提供上下文提供了许多可能性。举个例子,我在白马旅馆下班后再与我讨价还价的店主问题不再存在。NPC还意识到玩家在对话期间拾取的物品。这意味着如果你打开一个箱子、收获动物皮毛或摘一朵花,NPC将能够对这些行动进行评论。
NPC现在与xVASynth的唇形同步。这显然比之前那些浮动的概念性声音更自然。我还做了一些提高生活质量的改进,比如将响应时间缩短到约15秒,并添加了一个开始对话的法术。
当所有的东西都就位后,能够坐下来与这些虚拟角色对话是一种非常超现实的体验。没有什么比听到同样的重复语音更能让我摆脱这种体验,而通过这个项目,没有两个回答是相同的。还有很多工作要做,但即使在当前状态下,我也无法再回去不用这个游戏了。
你可能还会注意到NPC实际上发出的声音也相当机械,尽管“Art from the Machine”说他们正在使用语音识别与ChatGPT 3.5驱动的系统进行对话。视频中听到的声音是由xVASynth生成的,然后在视频编辑过程中插入以替换他们所称之为”不适合播放的电台声音”。
至于何时可以下载和玩这个项目?开发者表示,项目的发布仍然存在一些棘手的问题。
“我还没有真正考虑过如何发布这个项目,所以我想我得研究一下其他ChatGPT项目,看看其他人是如何解决API密钥问题的。我希望能够通过与本地运行的LLM模型进行连接的方式来满足那些不愿支付API费用的人。”
开发者表示,改进提供更自然NPC回复的问题也需要解决。

目前,我设置NPC会说”让我想想”来表示我已经收到了反馈,并且正在生成回答,但你说得对,这可以扩展到从几个不同的替代行中选择,而不是每次都重复相同的一句。
另外,视频在提示后明显加快播放速度,这主要是因为语音生成软件xVASynth,由于正在本地运行,导致响应速度变慢。开发者表示,ChatGPT本身不会影响性能。
这不是我们看到的第一个使用聊天机器人的项目。丰富用户互动。长期从事VR开发的先驱、《Modbox》的开发者Lee Vermeulen在2021年发布了一个视频,展示了他使用OpenAI GPT 3和语音演技软件Replica进行的首个测试之一。在Vermeulen的视频中,他讲述了如何为每个NPC设置参数,给予他们应有的知识体系,并根据这些参数指导他们做出回应。

请查看Vermeulen的视频,它正是激发了《Art from the Machine》开始开展《上古卷轴VR》修改工作的那个视频:

正如你所能想象的,AI驱动的NPC互动只是冰山一角。能够与NPC自然对话,即使有些支支吾吾,并不完全达到人类水平,可能优于必须浏览大量2D文本菜单或经历缓慢而笨拙的教程。它还提供了与你可靠的AI伙伴(例如《上古卷轴》中的Lydia或《辐射4》中的Nick Valentine)更加紧密联系的机会,他们不再提供机械的对话,而是真正地在必要时帮助你。

这只是《Art from the Machine》这样的修改模组可能为不采用AI驱动NPC的现有游戏带来的表面层次的东西。想象一款实际依赖于你能够提出正确问题并进行自己的侦探工作的游戏——这是我们以前从未在VR或其他地方体验过的角色扮演游戏。

0

  1. This post has no comment yet

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注