/ Voiceofvr / 0浏览

Facebook在增强现实上的人机交互研究:神经输入、触觉反馈、上下文感知人工智能和智能点击

The Voices of VR Podcast

欢迎


我的名字是Kent Pfei,欢迎来到《VR之声》播客。今天的节目会有点实验性质,因为上周Facebook举行了一个名为“Inside the Lab”的新闻发布会,公开了一些不同的研究人员在Facebook Reality Labs正在开发的神经输入设备。

神经输入设备的潜力


他们在2019年收购了Control Labs,并使用这种肌电图(EMG)腕部传感器检测手腕肌肉的发射信号。基于这些数据,他们能够推断出各种详细的信息,从而作为输入设备使用。考虑到增强现实和虚拟现实的未来,输入设备是最大的瓶颈之一,往往仅限于2D鼠标。我们需要更加灵活的设备,以在这些虚拟环境中表达我们的“具身性”。实际上,他们能做的事情非常多,包括目标定位单个运动神经元,这几乎使得不同的组合和适应成为可能,这与神经可塑性结合,可以自定义自己的输入设备。这是我们的发展轨迹,我对此感到非常兴奋,因为这与许多其他脑机接口的工作形成对比,后者主要依靠EEG、开放BCI和fMRI等方法试图获取脑电波,但从手腕的EMG可以获得许多高保真的输入。

对采访的背景


我之前对Control Labs进行了采访,因此对他们正在做的事情有了一些背景了解。实际上,在3月8日,马克·扎克伯格与《信息》(The Information)进行了采访。《信息》是一个订阅制网站,我去年有机会与Keith进行交谈,讨论他对Facebook、苹果等不同公司在增强和虚拟现实方面的报道。最近,他们开始了一个每日新闻简报,由Matt Olsen负责,内容涵盖了关于这些公司最新商业动态的深度报道。

Facebook的公关活动


在新简报发布之际,他们邀请了马克·扎克伯格进行公开发布,因为扎克伯格是《信息》的读者,是他们工作的粉丝。这也是为了启动围绕神经接口的公关活动。虽然一切技术上都是公开的,但由于大多数人都在做印刷报道,作为播客主持人的我无法直接录制引用,这让我感到遗憾。因此,我将尽量概述展示内容,并进行总结,就像我在播客结尾时的笔记一样。

隐私问题的担忧


谈及Facebook的智能点击和情境感知AI的愿景时,我对某些技术的必要性持更加怀疑的态度,尤其是关于隐私的担忧让我质疑,是否值得不惜一切代价去追求这些技术。尽管Facebook声称他们可以从零开始构建平台,并在安全、隐私和安全性方面有充分的自主权,我对此实际上并不那么乐观。因此,当我问到有关伦理和隐私方面的问题时,并没有得到令人满意的答案。

关于智能点击的概念


Sean Keller作为Facebook Reality Labs的研究总监,提出了人机交互的新范式,关注AI交互问题。他谈到的“智能点击”实际上是希望的开始,通过手腕的技术,让用户以全新的方式与设备进行交互。

隐私和伦理的挑战


我提出了一个关于人们在场景中的同意管理及选项的问题,尤其是那些不使用该技术的旁观者。这是一个棘手的议题,因为在捕捉背景信息时需注意隐私保护和个人信息。因此,这一切让我感到有些不安,怀疑他们在这方面是否有足够的规划。

总结与展望


在这次发布会上,我们确实看到了许多引人注目的研究和发展方向,特别是在神经输入和反馈设备方面。但是对于如何处理隐私等重要议题,Facebook似乎还有许多未解之谜。希望不久的将来能提供更多的信息和解答。感谢大家的收听,我们会继续关注这方面的发展。

特别感谢


特别感谢所有支持Patreon的支持者们!如果您希望继续支持我在Voices of VR播客上的工作,请考虑成为Patreon会员,您可以通过patreon.com/voicesofvr进行捐赠或成为会员。