/ Roadtovr / 0浏览

Quest的手追踪技术使得在虚拟现实中学习基本手语成为可能。

目前尚没有一款全面的虚拟现实学习手语的应用程序,但瑞士伯尔尼应用科学大学计算机科学系的一名学生正在使用Oculus Quest的原生手部跟踪技术,看看我们如何能够通过现有技术实现这一目标。

瑞士伯尔尼应用科学大学计算机感知与虚拟现实研究小组(cpvrLab)的学徒Cédric Girardin创建了一个基本的Quest应用程序,可以识别并教授用户德语拼写手语字母表中的23个手势。
用户能够执行的每个手势都会被识别并以3D形式显示;该应用程序实时分析用户的手势,并验证用户是否正确执行了手势。

作为Girardin的毕业项目,这个所谓的“VR手指字母训练应用程序”目前仅限于德语拼写手语方法,但Girardin打算很快将其开源。
Girardin在Reddit上的帖子中表示,该应用程序将保存的手部模型与当前手部姿势进行比较,因此理论上可以向应用程序添加“任何类型的手势”,并进行验证。
如果你想亲自尝试一下,可以通过SideQuest(Quest的非官方游戏、体验和工具库)免费侧载这个应用程序。请参考这个方便的指南,了解如何在Quest上侧载应用程序。

还有更强大的虚拟现实手语吗?
VR用户一直在使用简化版手语进行交流。然而,聋人用户在当前的VR技术中遇到了一些麻烦,例如VR Chat用户“Quentin”,他是一名志愿者翻译和听觉人士。
在与《2 Girls, 1 Podcast》进行的对话中,Quentin解释说,由于VR控制器无法进行全面的手指跟踪,准确的手语表达是不可能的。因此,Quentin表示,为了让聋人用户在VR中能够相互交流,他们发展了新的手语,但仍然需要进一步的开发,以便用户能够用他们的母语进行非修改的手语表达。
考虑到已经存在的按语言群体划分的多种手语以及一些特定地区的手语,需要一种更准确的输入方法,以避免进一步复杂化问题。
虽然像Quest上所见的光学手部跟踪并不是一种完美的方法,但它似乎解决了迄今为止在聋人VR社区中出现的一些问题。以下是Quentin和其他一些VR Chat手语用户的活动视频:

0

  1. This post has no comment yet

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注