索尼AR/VR专利提出翻译Avatar分身角色的手语的方法
索尼提出了一种翻译手语的方法的专利申请。根据申请描述,该方法利用图形插图和Avatar来将手语从一种语言转译为另一种语言。首先,捕获手语并将其转译成文本形式,然后进行语言转译,最后以图形插图的形式生成手语。此外,系统还会分析用户的视频和音频,识别手势通信的内容,并确定其语义。用户设备通过网络与游戏服务器通信,实现用户在虚拟环境中相互共享和交互。用户的手语可以根据所选的首选手语进行翻译,以便在虚拟环境中的其他用户可以准确理解。系统还考虑了用户的游戏上下文,包括用户的活动、位置和目标等,以帮助确定手势的语义含义。通过识别用户的手语通信并将其转译成另一种手语,该系统为听力障碍者或无法言语的人提供了一种交流和表达思想的方式。