Insider Insider
Roadtovr 尚无浏览 1 分钟阅读

采访:SoftKinetic旨在帮助我们进入虚拟世界

Mike Nichols,SoftKinetic的副总裁(内容与应用)
Road to VR与Softkinetic的副总裁,Mike Nichols,探讨了他们如何帮助弥合虚拟现实和人类互动之间的差距。

弥合虚拟现实和互动之间的差距
Softkinetic是一家新一代的技术公司,其兴起是基于人类与数字界面和世界互动问题的日益增加的兴趣。天然人类互动的趋势可以说是由任天堂Wii和其Wii-Mote的出现和成功,以及微软Kinect的出现而开始的,这两种设备为消费者提供了以前无法实现的方式,并扩大了游戏的吸引力。
Softkinetic将自己称为3D视觉公司,他们的业务包括深度传感器、跟踪中间件和内容的创建。他们提供各种白标深度摄像头,并最近与创新科技和英特尔合作,发布了第一款桌面深度网络摄像头Senz3D,以及英特尔的感知计算和实感SDK。
创新科技的Senz3D摄像头
Senz3D摄像头和iisu中间件设计用于桌面或笔记本电脑。宣传的应用包括面部跟踪和识别、手部和手指跟踪、3D扫描以及游戏。但是,Mike今天在这里的原因是展示如何在虚拟现实环境中使用摄像头。与可以用来控制角色手部的设备(如Razer Hydra)不同,Senz3D可以追踪你的手部和手指动作,因此你可以看到和使用自己的真实手部与虚拟现实中的物体进行互动。
如果您有Oculus Rift并且可以使用3D打印机,您可以从Thingiverse免费下载文件并打印出支架。我们使用了MakerBot打印了这个支架,并且有几个简单的Unity3D演示供Oculus Rift用户尝试。
Road to VR的读者可能还记得Ben Lang在CES 2014上亲自尝试这个应用,他戴着Oculus Rift,面部固定了一个创新科技Senz3D深度摄像头,这是一个3D打印的支架。一个简单的Unity演示让Ben可以在虚拟现实空间中操作基本形状,并看到他真实的手部而不是角色的手。
Mike Nichols是Softkinetic的副总裁(内容与应用)。他于2010年加入了这家公司,并曾负责微软的“Natal”项目,后来成为Kinect。Road to VR的Jonathan Tustain在伦敦的VR Meetup上采访了Mike,了解了该公司增强虚拟现实应用的野心。
–
Road to VR:SoftKinetic是谁?
Mike:SoftKinetic是一家专注于3D视觉的公司,他们创建深度传感器、跟踪中间件和内容。我们生产各种白标深度摄像头,并最近与英特尔和创新科技合作发布了世界上第一款桌面深度网络摄像头——Senz3D,以及英特尔的感知计算和实感SDK。我们最近的VR演示中使用的就是Senz3D摄像头。
Road to VR:是否可以将创新科技的Senz3D摄像头与同样被用于演示VR互动的Leap Motion进行比较?如果可以,它们有何不同?
Mike:创新科技的Senz3D与Leap在形式和功能上都非常不同。Senz3D包括一个飞行时间(ToF)深度传感器,可以提供涵盖用户的交互式体积。它能够从任何位置或方向跟踪手部和手指,这为与屏幕互动提供了更舒适的方式。Senz3D的设计就像传统的摄像头一样放置在笔记本电脑或桌面显示器上,因此不会在工作区域增加杂乱,当您使用时技术可以完全消失。
创新科技的Senz3D非常响应迅速,可以轻松跟踪手部和手指(甚至更多)的任何位置或方向。
Road to VR:您最近的演示是否表明SoftKinetic正在认真考虑利用深度摄像头技术开发虚拟现实应用?
Mike:当然,SoftKinetic对虚拟现实很感兴趣。这是一种与其他体验完全不同的体验,它具有巨大的潜力来改变我们交互和观看媒体的方式。我们在CES和伦敦VR Meetup展示的内容实际上只是一个我们想要分享并得到反馈意见的概念验证。与很多玩过Oculus DK1的开发者一样,我们立即被它的效果所吸引,但我们感觉软动力的深度识别专业知识还能为VR体验带来更多。通过追踪你在VR中的身体动作,创造真实的存在感。迄今为止,我们得到了很多鼓舞人心的回应。

Road to VR:与惯性追踪相比,“时飞”传感器会足够准确吗?
Mike: 毫无疑问。当你用Senz3D相机的中间件追踪你的双手时,你已经能够看到这种能力的一瞥了。技术在不断改进。

Road to VR: 当Ben在CES尝试这项技术时,他评论道,“创新深度相机的延迟相对令人印象深刻,但仍有改进的空间。有些抖动,并且相机的视场与Oculus Rift不匹配” – 你们如何解决这些问题?
Mike: 这些都是很好的观察。Creative Senz3D非常敏感,并且可以轻松追踪双手和手指(以及更多),无论处于任何位置或方向 – 这正是它的设计初衷,用于笔记本电脑或台式机。当我们开始尝试新项目,比如VR时,重要的是我们要了解为提供最佳用户体验需要什么。使用Senz3D使我们能够快速地为想法进行原型设计,并从结果中学习。我们的原型的目标不是创建一个稳定的演示,而是快速开发出使用手部与VR中的物体进行互动的原型设计。视野和延迟只是我们正在研究的几个方面之一。

Road to VR: 对于Ben关于这项技术未来的结论,你会有何回应? – “虽然这种自然手势输入在对无训练、直观输入至关重要的休闲VR体验中表现良好,但控制器在短期内不太可能消失。真正的玩家渴望的响应速度和准确性目前只能通过控制器来实现,在这方面,Sixense的STEM系统正自信地引领潮流。”
Mike: 我们不认为自然手势是一个“全有或无”的解决方案。我认为玩家在控制游戏时渴望的是正确的工具,并且响应速度和准确性并非只有物理控制器才具备。在控制和导航VR方面仍然有很多障碍要克服。我们通过对VR中的手部追踪进行尝试,早期就发现了一个“啊哈”时刻,基于一个简单的原型。对我们来说以及尝试过我们演示的人来说,使用手部来操纵VR中的物体有一种本能的直觉。它能按照你所想的方式工作,并且还具有提供空间意识的额外好处。

在控制和导航VR方面仍然有很多障碍要克服。

正如我之前暗示的,对于许多VR体验来说,创造存在感非常重要,我们认为使用深度和追踪来将你的实际动作(而不是通过摇杆对你的动作进行解释)转化为VR中的动作是创造让你觉得自己真的在别的地方的关键。没有任何物理控制器可以做到这一点。

Road to VR: 你们的技术能为VR提供位置追踪吗?
Mike: 是的,我们的传感器可以提供位置追踪,这对于在VR中转换用户的头部动作非常关键。它还可以提供实时房间分析,为VR体验带来额外的好处。

Road to VR: 我们的一位读者“眼和眼”发表评论称:“我很好奇他们的相机是如何避免了Leap明显存在的遮挡问题的?这在不同的光照条件下效果如何?” 你对此有何回应?
Mike: SoftKinetic的时飞深度传感器和追踪中间件与Leap非常不同。我们的深度相机可以在用户周围创建一个大的交互体积,因此你可以自由移动你的手。任何方向或位置上,在摄像头前面可以追踪手部、手指和头部的动作。由于我们的ToF摄像头使用红外线光,所以在明亮或昏暗的光照条件下都能正常工作,即使完全黑暗也不会影响性能。从摄像头发出的红外线只对直射阳光敏感。

Road to VR:SoftKinetic能增加FoV,甚至与Rift相匹配吗?
Mike:Creative Senz3D摄像头拥有90°的对角视野,这使得它非常适合作为台式解决方案。我们正在原型制作各种应用场景,以确定理想的VR视野是多少。

Road to VR:SoftKinetic与VR制造商讨论传感器集成吗?
Mike:是的,我们正在积极与Meta等从事增强和虚拟现实的公司合作。我们正在努力找到我们需要的答案,设计出正确的VR/AR解决方案。对我们来说,重要的是抽出时间原型制作各种应用场景,不要匆忙得出任何预设结论。

Road to VR:VR开发人员需要哪些工具来创建利用这些功能的Unity演示?
Mike:很简单。如果您还没有Senz3D摄像头,可以在亚马逊上购买。我们还提供了一个3D模型,可以用来将摄像头固定在Oculus DK1上。该模型可以在MakerBot Thingiverse上免费下载。

SoftKinetic的iisu中间件也可以免费下载,提供了所有工具和Unity支持,让您可以开始制作自己的演示。请在他们的网站上了解更多关于SoftKinetic的信息。