在上周的2016年CES上,我与Leap Motion的首席执行官迈克尔·巴克沃尔德进行了交流,他向我们介绍了该公司的最新工作,如互动引擎和重新投影的手势。巴克沃尔德还表示,该公司的技术将在今年”重要的”OEM硬件产品中出货。
虽然Leap Motion于2010年成立,比Oculus推出首个VR头显开发套件还早三年,但该公司已经全面转向虚拟现实,并相信他们的手势摄像头技术有潜力成为VR的输入方式。
Leap Motion为将手势摄像头安装在Rift DK2上创造了特殊的支架。
“我们百分之百专注于AR和VR,除了当前已经有成千上万的开发者使用(现有的Leap Motion摄像头)来做各种事情,”Leap Motion的首席执行官迈克尔·巴克沃尔德告诉我。”但是…作为一家公司,我们试图非常非常专注于VR,并与VR的原始设备制造商合作,将技术内嵌并改进VR的软件。
虽然该公司没有透露与哪些公司合作,巴克沃尔德表示,我们将在2016年看到Leap Motion的技术内嵌在”重要”的OEM硬件产品中。然而,由于Oculus、HTC和Sony已经展示了它们首选的物理手柄输入方式,所以在2016年至少来看,跳跃技术可能不太可能出现在这些公司的硬件产品中。
相反,Leap Motion可能瞄准了手机领域,在那里携带物理手柄不是很明智。如果是这样的话,我们可能会看到这家公司的技术被嵌入到移动VR头显甚至手机本身中。
在软件方面,该公司一直在不断改进他们的计算机视觉堆栈,使手部追踪尽可能准确。公司内部一直在开发他们所称的”互动引擎”,他们希望以某种方式将VR用户与物体的互动标准化和改进,以便开发人员更专注于Leap Motion应用的体验,而不是花时间精细调整用户手部与这些体验之间的互动。
我们在CES上亲自尝试了互动引擎,并在使用Leap Motion进行物体操作的可靠性方面看到了明显的改进。虽然代码尚未向开发者发布,但该公司表示他们计划在不久的将来广泛发布。
Leap Motion的最新手部追踪软件现在在使用所谓的”影像手部”时使用重新投影视图。影像手部是Leap Motion摄像头透过用户看到的用户实际手部的虚拟视图。开发者可以选择使用影像手部,或者使用计算机建模手部来代替用户的手部。
当使用影像手部时,Leap Motion的软件现在会”重新投影”视图,使其比以前更准确。巴克沃尔德解释说,因为Leap Motion上的摄像头并不像人眼那样分开得很宽,而且摄像头离用户的眼睛实际位置有几英寸的距离,因此相机对手部的视图与用户不佩戴头显时所看到的手部视图并不完全相同。重新投影用于解决这个问题,将手部的比例和距离修正到与用户感觉尽可能自然一致的程度上。
0