/ Roadtovr / 0浏览

Facebook发布了最新的手腕戴式原型,用于XR输入和触觉反馈。

Facebook今天公布了一项最新的研究成果和对手腕佩戴式输入设备的展望。该公司预计,这款设备将成为未来增强现实和虚拟现实交互和触感的基础。该设备目前还处于研究原型阶段,能够感知用户手臂中的电信号以检测刻意的输入。除了作为一个简单的“按钮”输入外,公司表示该设备甚至可以实现准确的、无需键盘的打字等功能。

在本周的媒体简报会上,Facebook Reality Labs的研究人员分享了他们最新的研究成果,开发出一种新的输入技术,该团队相信这将成为未来 XR 设备交互的基础。该团队还分享了一个概念视频,展示了他们认为这项技术可能实现的功能。

除了概念视频,研究人员还讨论了将其付诸实践的工作。
手腕输入
图片由Facebook提供
Facebook的研究人员似乎越来越确信,手腕佩戴式控制器是他们作为“一直处于开启状态”的可穿戴输入设备的最佳选择,可以为 XR 体验提供“超低摩擦力”的交互体验。Facebook已经在2019年的CTRL-Labs收购中继续完善手腕佩戴式输入技术。

手腕控制器的核心是肌电图(EMG)传感器,可以检测控制手部肌肉的电信号。研究人员表示,EMG不仅可以检测粗略的动作,还可以精确地感知毫米级的单个手指动作。在公司分享的视频中,Facebook表示下图所示的手部动作完全通过EMG检测实现:

尽管这种技术在近期的应用可能是为了通过相关的增强现实系统确认用户所做出的选择,但研究人员表示,在更远的未来,它将被用于操作虚拟界面和物体,甚至无需键盘进行打字。“可以相当肯定地说,最终你将能够使用EMG在桌子或腿上以较高的速度进行打字,甚至可能比现在使用键盘的速度更快。初步研究结果是有希望的,”公司写道。“事实上,自从2019年加入FRL以来,CTRL-labs团队在个性化模型方面取得了重要进展,缩短了训练个性化键盘模型的时间,这些模型可以适应个体的打字速度和技巧。”

研究人员分享了一个据称是实时演示这种个性化键盘模型的视频,使用这款可穿戴原型实现了相对快速的无需键盘打字:

除了打字,研究人员表示,通过手腕读取手指动作的能力还可以让用户操纵物体。他们分享了另一个据称是真实演示的视频,展示了这种能力的实际应用:

在未来,团队建议用户甚至可以训练自己在没有任何物理动作的情况下进行一些操作。

虽然公司称其手腕佩戴设备是一种“神经”输入设备,但它在神经输入和“读心术”之间做出了区分。“这不同于读心术。可以这样理解:你拍了很多张照片,但只选择分享其中的一些。同样地,你有很多想法,但只选择其中的一些付诸行动。当这种情况发生时,你的大脑会发送信号给你的手和手指,告诉它们以特定的方式移动,以执行打字和划动等操作,”公司写道。“这是关于在手腕上解码这些信号-你已经决定要执行的动作-并将它们转化为设备的数字命令。”

始终开启的触觉
图片由Facebook提供
对于可能舒适地佩戴整天的设备,研究人员表示,手腕佩戴式设备也是传递触觉的理想位置。

为此,该公司一直在尝试不同类型的手腕触觉技术。其中一款原型名为“Bellowband”,在设备的手腕带内部铺设了季度大小的气囊,可以提供触觉反馈。扁平或充气以对用户的手腕施加压力。可以通过使用不同的气囊组合或以不同的速率脉动它们来实现不同的触觉效果。
另一个名为“Tasbi”(即“触觉和挤压手环界面”的缩写)的原型使用了六个振动驱动器,围绕手腕放置,并配有一种基于张力的手腕挤压机制,可以动态地紧缩并对用户的手腕施加压力。
研究人员表示,这样的原型有助于公司找出哪种触觉反馈技术可能值得追求。
情境感知人工智能
Facebook对增强现实和“超低摩擦”输入方法的愿景的一个重要部分是需要可以深入了解用户需求背景的人工智能。
“基础人工智能对您未来可能想要做什么有一定的理解。也许您要到外面慢跑,基于您的过去行为,系统会认为您最有可能希望听您的跑步播放列表。然后它在显示屏上呈现给您一个选项:‘播放跑步播放列表?’这就是适应性界面的工作,“FRL研究科学经理Tanya Jonker写道。“然后您只需使用微小的手势来确认或更改该建议。智能点击使您能够以非常低摩擦的方式执行这些高度情境化的动作,因为界面会根据您的个人历史和选择提供与之相关的内容,并且允许您以最少的输入手势完成。”
但现在这主要还是概念性的。尽管当今的智能手机或智能手表可以利用一些线索(如时间、位置和连接的配件)来推导可能与您相关的操作,但Facebook所设想的这种情境感知人工智能建议需要先进的人工智能以及可以实时了解用户即时环境的传感器装置。
隐私问题尚未得到回答
Facebook表示,其建立XR远景的目标是构建以“人类”为绝对中心的整体体验技术。
要实现公司的愿景,需要硬件和软件对用户及其环境有广泛的了解。
Facebook认为,在开发这些技术的整个过程中,保持透明是至关重要的,但承认自身无法解决更广泛的问题。
“理解和解决这些技术提出的伦理问题的全部范围需要社会层面的参与,”FRL研究科学总监Sean Keller表示。“我们自己无法独立解决这些问题,所以我们也不试图这样做。在我们发明新技术之际,我们致力于与社区分享我们的经验,并进行公开讨论以解决相关担忧。”
事实上,该公司表示,今天分享这些信息的一个重要原因是与更广泛的技术社区就这些问题展开讨论,然后再将技术从实验室推向市场。
“[…]我们支持并鼓励我们的研究人员将他们的工作发表在同行评审的期刊上,这也是今天讲述这个故事的原因。我们相信,在此类技术成为消费品的一部分之前,确实有许多讨论需要进行开放和透明地讨论,以探讨人机交互的未来可能和应该是什么样子。”

0

  1. This post has no comment yet

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注