/ Roadtovr / 0浏览

Meta的Quest语言学习应用结合了混合现实和人工智能

Meta发布了一款针对Quest 3的开源语言学习应用,结合了混合现实透视和人工智能驱动的物体识别。

新闻
这款名为Spatial Lingo: Language Practice的应用,不仅旨在帮助用户利用自己房间中的物体练习英语或西班牙语,还为开发者提供了创建自己应用的框架。Meta称Spatial Lingo为“前沿展示应用”,旨在通过其将翻译后的单词覆盖在真实世界物体上的能力,将环境转变为互动课堂,这得益于人工智能和Quest的透视相机API。

该应用的人工智能不仅专注于物体检测以构建词汇,还配备了一个3D伴侣为用户提供指导,Meta表示,这个伴侣在用户练习口语时会提供鼓励和反馈。它还会监听用户的声音,评估他们的回答,并实时帮助用户掌握发音,Meta称。

Spatial Lingo还开源,允许开发者使用其代码、进行贡献或者构建自己新的基于Unity的体验。希望使用Spatial Lingo的开发者可以在GitHub上找到它。您也可以在Horizon Store上免费找到它,适用于Quest 3和3S。

个人看法
我通常对大多数语言学习应用持谨慎态度,因为其中许多应用着眼于最大化用户参与度,或迎合语言学习者认为自己需要的内容,而不是事实上的答案:数小时的多媒体消费加上与母语者的口语练习。作为一名说英语的母语者,同时会说德语和意大利语,我这样说。

然而,Spatial Lingo并不承诺流利;它主要是一个演示,带来了一些相当酷的构建模块——作为进入英语或西班牙语常用名词基础的一个巧妙切入点。并且,它可能对于初学者也相当有用,不仅可以看到他们试图记住的单词,还能获得关于如何发音的反馈。这是一个不错的小工具,也许有人可以把它发展成一个更加出色的项目。

话虽如此,你所能期待的最高质量的语言学习无疑应该涉及到一位母语者(或与母语者无法区分的人工智能),他们不仅能够指着一只猫并说“el gato”,还能够在完整的句子中使用这个词,让你对语言的语法和流畅度也有感受——这些是很难直接教授的,通常会在语言习得过程中自然吸收。

现在,这才是那种会让我 raise an eyebrow的XR语言学习应用。