2月18日,英特尔在加利福尼亚州洛克林举办了开发者实验室活动,地点位于西耶拉学院的新“黑客实验室”。该活动旨在教授开发者如何利用英特尔最新的RealSense 3D相机进行开发,该相机通过1080p彩色摄像头和深度传感器实现了交互手势输入。《Virtual Reality之路》与英特尔合作,邀请了一位当地的虚拟现实爱好者为活动进行报道。
本文是由Ally Grace Esparza(@allygrace)撰写的客座文章,她是一位目前居住在加利福尼亚州萨克拉门托的编剧,负责为K-5年级的学生开设课外工程课程。她对虚拟现实的兴趣始于《黑客帝国》和《头号玩家》,并随着近年来技术的普及而不断增长。她主要研究虚拟现实和人工智能,以用于编写涉及这些技术的剧本。
到达RealSense开发实验室的时候,你可以感受到人们的兴奋情绪,他们分发电脑和相机。相机开发套件可以插入电脑,但是英特尔最近开始直接将RealSense集成到笔记本电脑和台式机上。如果这种技术被广泛采用,深度传感和手势输入可能会像网络摄像头一样成为计算机的常见功能,为VR和其他应用程序提供一种标准的手势控制方法,超越键盘和鼠标等抽象界面。
整个活动以一个简短的介绍开始,介绍了相机可以感知的输入类型,包括手势、面部表情、语音和环境等,以及RealSense技术的一些特点,以帮助参与者进行构思。
开发者们看到了相机如何用于创建数字绿幕,基本上将用户置于数字环境中,并能实时追踪用户的3D姿态,非常适合沉浸式学习、工作和娱乐。他们强调了创建自然而不复杂或繁琐的命令的重要性,注重可用性、易用性,并避免手臂疲劳。他们还展示了如何通过将手势、语音、面部和深度分析融入游戏中来创建动态输入。
虽然虚拟现实头显会阻挡眼球跟踪,但是借助RealSense,我们可以通过头部跟踪算法来实现对口腔运动的跟踪,从而将语音映射到角色上。
在教育应用中,RealSense相机可帮助创建互动课程和故事,将2D和3D物体带入体验中,或者感知面部和情绪信号,以便计算机知道何时辅助学习过程。在构思要使用相机创建的项目时,我考虑了随时间追踪这些信号,以确定学生遇到困难的时刻、容易做到的事情以及学生喜欢做的事情,从而为学生创建学习档案,并实现更深入和有效的学习。
当地独立游戏工作室MobiRobo的Christopher Haupt对RealSense技术所带来的教育机会最感兴奋。具体而言,让孩子们进行以前在课堂上昂贵或危险的实验。
通过专注于3D环境以及详细的手指和面部跟踪,RealSense将英特尔置于可访问和先进手势和面部识别技术的前沿。具有22个手势识别点和78个面部特征检测点,实现了在面部和角色映射方面的卓越准确性。
这款相机不仅在教育和娱乐领域有用途。我听到开发者们在讨论一个能感知驾驶员疲劳并触发收音机或空调以保持他们警醒的程序。其他人则在谈论将其用作家庭或汽车的钥匙,只有授权的用户才能打开。那些你允许进入的人才能解锁。或者,我的想法是,面部识别技术只为你批准的人启动你的汽车,并将试图启动它的其他人的照片发送给车主,以消除汽车盗窃行为,或阻止你的青少年未经许可驾驶。
在整个一天中,我们对使用RealSense摄像头的想法进行了奖励。这从对各种想法的探索开始,这些想法在推特上共享。其中一个想法因其潜力能够帮助聋哑社区而受到认可。
通过我的RealSense手势识别技术,我将帮助聋哑社区利用手语进行视频聊天。#RealSense
– German (@germano18) 2015年2月18日
另一个奖品是一台配备英特尔芯片的平板电脑,获奖项目名为“Intexticator”,它会感知驾驶者与手机之间的头部运动,并向第三方发送警报,说明该个体正在发短信和开车,面向新驾驶的青少年的家长。
最大奖品是一台配备英特尔芯片的笔记本电脑,它赋予开发者利用RealSense摄像头的手势识别功能,使你的头部动作控制角色的移动,张开和合拢手臂来使他变大或缩小,并且微笑——是的,微笑可以射击敌人。
总而言之,RealSense的手势输入感觉像是我们与计算机互动的未来,为我们提供了超越今天触摸屏的下一个进化步骤。
如需更多信息,请访问RealSense资源中心或英特尔RealSense主页。
本文由英特尔赞助,并由独立的虚拟现实爱好者Ally Grace撰写,她参加了英特尔的RealSense开发者实验室活动。