Meta提出基于拇指的机器学习AR/VR微手势系统STMG
AR/VR设备目前主要使用裸手交互来替代控制器,但当前的手部输入仍主要依赖于捏合姿势。为了解决这个问题,Meta提出了一种名为STMG的基于拇指的机器学习微姿势系统。STMG微姿势是指拇指在食指侧面的轻触和滑动,将它们映射为移动和滚动命令。该系统通过在头戴设备上运行的骨骼追踪识别额外的基于拇指的微姿势,增加了姿势空间。团队采用机器学习方法,在7种拇指姿势中实现了95.1%的识别准确率。STMG微姿势模型证明了基于拇指的姿势是VR/AR用例的可行输入方法。同时,团队还研究了基于微姿势的移动控制和滚动设计,获得了用户的积极反馈。STMG系统为VR/AR用户提供了更小幅度的、基于拇指的姿势来控制设备,提高了交互体验。