/ Voiceofvr / 0浏览

Niantic Spatial的Project Jade演示展示了最新的基于位置的人工智能旅游指南创新。

Voices of VR 播客

简介

大家好,我是 Ken Bye,欢迎收听《Voices of VR》播客。这个播客关注于沉浸式叙事在空间计算未来的结构和形式。您可以在 patreon.com/voiceofvr 支持这个播客。

今天的主题

在今天的节目中,我将介绍我在 Snap Lens Fest 上看到的最精彩的演示之一,那就是来自 Niantic Spatial 的 Project Jade 最新版本。他们在增强现实世界博览会展示了 Project Jade 的预览。我有机会与 Niantic Spatial 的执行制片人 Alicia Berry 和产品营销负责人 Asim Ahmed 交谈。

项目概述

之前在增强现实世界博览会上,我看到了 Project Jade。有一个区域是在长滩会议中心外的公共汽车站,地面上绘有不同的壁画。他们能够使用 GPS 系统在那个区域进行绘画,并且能够更精确地检测您的位置。通常 GPS 的精度约为 30 英尺,而他们的虚拟定位系统声称可以提高到厘米级的精度。不过,随着不同边界或场景的变化,我认为他们通常能在大约一英尺的范围内进行定位。他们仍在优化精度,但理论上他们可以在物理现实中锚定事物,达到更精细的空间精度。

他们展示了更新版的 Project Jade demo,他们对 Snap 总部进行了全方位扫描,但因天气原因(下雨)不得不进行多次扫描。他们的扫描在环境变化时会受到一定影响。当这种情况发生时,可能会失去跟踪。不过,他们也将空间平面图的数据纳入到系统中,他们的计划是使这一切更加无缝,以便能够获取空间的平面图,通过不同系统实现特定地点的增强现实体验。

他们所增强的主要是空间意识和一个虚拟助手。在这个环境中,他们为您勾勒出一些轮廓,以便您能够获得空间的定位感。同时,您可以与 Peridot 角色进行对话,询问在 Snap 开发者大会上可以看到的不同事物。在那里进行了关于增强现实面部滤镜的十年回顾展。

他们通过虚拟助手传递的知识将指导您游览不同的感兴趣地点。整个概念是,您能够在空间中进行扫描,同时通过一系列 AI 服务与不同的虚拟角色互动,在语音转换和文本识别中实现流畅的交互。他们与 Hume AI 合作,使虚拟角色具有更多情感的表现力,同时与 Keiichi Matsuda 和 Pear Brain 的知识库合作,为大型语言模型创造更强的前端接口,以便提供丰富的知识支持。这一系列软件和服务的后端驱动着这个 AI 系统。

对话开始

我跟 Alicia 和 Asim 的采访在 2025 年 10 月 16 日星期四进行,这是在 Snap 开发者大会 Lens Fest期间,在位于加利福尼亚州圣塔蒙尼卡的 Snap 总部进行的。

Alicia Berry 的介绍

嗨,我是 Alicia Berry,我在 XR 领域工作了大约十年。在过去两年中,我们一直在开发基于 Peridot 的混合现实和增强现实体验。在此之前,我曾在世界规模的游戏、AR/VR 社交应用和大型 MMO 中工作过。

Asim Ahmed 的介绍

嗨,我是 Asim Ahmed,是 Niantic Spatial 的产品营销负责人。我在 XR 领域工作了大约十年,2016 年加入 Niantic,期间参与了多款增强现实游戏的开发,并随着公司拆分跟随来到 Niantic Spatial。最近几年,我一直在 Peridot 特许经营项目中密切合作。

背景故事

我在 XR 空间的起点是 Meta,创造了 Facebook Spaces,这是全球第一个多人体验。那是辉煌的时刻,但遗憾的是,没有人同时拥有 PC、Rift 和 Facebook 账户。后来我转向移动设备,参与了 Oculus 相关的项目,最终来到 Niantic 工作,帮助推出了多个项目,包括《怪物猎人 NOW》、《NBA All World》、《Pokemon Go》和《Pikmin Bloom》,将欢乐带给全世界。当公司向我们提案将 Peridot 移植到 HMD 头戴设备上时,我们十分支持。

我们将 Peridot 移植到 Meta Quest 3 和 Apple Vision Pro 的角色中,对此感到无比兴奋。而当 Snap 半年前提议将 Peridot Beyond 应用到这款 AR 户外眼镜的第一代产品上时,我们也非常兴奋。

技术探讨

在 Lens Fest 中,Project Jade 的最新版本展示了这一空间扫描技术的应用。我使用了一种尖端的 AI 角色来与你互动,并通过 GPS 和虚拟定位系统相结合的方式进行空间定位。我们是第一家与 Snap 合作的开发者,将 VPS 集成到 Lens Studio 的早期版本和 Spectacles 固件中,以期今天能够向公众展示这一技术。

为此,我们从 Scaniverse 应用开始,三天前扫描了场地,随后更新我们的地理空间浏览器,将信息放入世界中。我们构建了一个专有工具集,将平面图整合,建立起用于各个兴趣点之间的路线。我们的目标是实现灵活的体验,使 Peridot 不会穿越墙壁或阈值。

在会议期间,实际空间条件的变化多次导致我们需要反复扫描。我们期待将我们的完整 Niantic 技术栈整合至此,使我们能够更精确地理解您所处的位置,而不仅仅是依赖扫描。我们现在的目标是实现工具的内部更易操作,以便未来可以在一周内快速部署一个事件。

未来展望

Project Jade 展现出光明的未来。我希望它能够激励其他人推动当前技术的极限,进行富有创意的创新。我认为让这项技术能够应用于其他领域,比如在机器人技术上的潜力也很大。想象一下,未来在某个地点可能会有一个机器人欢迎您,指引您走向厨房,这一切都是基于 Project Jade 背后的科技。

最后的想法

如果您热爱 XP、空间计算与 AI 的结合,未来还有很多令人激动的事情待您期待。《Project Jade》是一个充满潜力的项目,它展示了人们如何与世界更深度连接,并为任何地点提供个性化的体验。希望大家继续关注,并感谢您收听《Voices of VR》播客,期待您再次光临!

感谢收听这一集的《Voices of VR》播客。如果喜欢这个播客,请传播给你的朋友,并考虑支持我们的 Patreon。我们依赖像您这样的捐赠者来继续提供这类内容,您可以在 patreon.com/wistavr 中注册并捐赠。感谢您的收听!