/ Voiceofvr / 0浏览

使用Eyefluence开发一种全新的眼球交互模型

Voices of VR 播客

主持人介绍

我叫 Kent Bye,欢迎收听 Voices of VR 播客。昨天的节目中,我有 Doug Bowman 来讨论 3D 用户界面,这是在 VR 和 AR 等新沉浸式环境中,超越鼠标和键盘与计算机互动的各种方式。

今天的节目中,我有 Ifluence 的 CEO 参加,我们将探讨他们正在开发的全新交互模型,主要是通过你的眼睛来操作。我们将在今天的 Voices of VR 播客中深入探讨 Ifluence 及其新的眼动交互模型。不过,首先请听我们赞助商的一则简短广告。

赞助商广告

这是由 Intel Core I7 处理器赞助的广告。VR 确实让我不得不购买我的第一台高端游戏 PC。Intel 让我来谈谈我的选择过程。我的哲学是尽可能选择最好的配件,因为我不想在第二代头盔发布后再次更换组件。我进行了严格的在线研究,查看了所有的基准测试和在线评论,发现最佳 CPU 是 Intel Core I7 处理器。但不要只听我的,去你自己研究一下,你会发现 I7 确实是最佳选择。

访谈开始

这次与 Jim 的采访发生在 9 月 2 日至 5 日的 San Francisco TechCrunch Disrupt 上。那么,让我们来深入探讨一下。

Jim Margraf 介绍

我叫 Jim Margraf,我是 Ifluence 的 CEO 和创始人。我们正在开发一种我们称之为高交互技术的技术,通过你的眼睛将意图转化为行动。

项目背景

也许你可以告诉我这个项目是如何开始的?这是一个伟大的故事。2012 年,我遇到了一个来自内华达州雷诺的神经学家,他已经花了 15 年的时间在这个技术开发上。他遇到了一个四肢瘫痪且无法说话的人,这个医生首先开发了一种眨眼检测机制,使这个人通过摩斯电码能够沟通。在接下来的 15 年中,他经历了 7 代可穿戴眼动追踪技术的发展,并得到了政府资助,开发了一副给斯蒂芬·霍金佩戴的眼镜,跟梅奥诊所的外科医生、陆军和海军的潜水员和直升机飞行员都进行了合作。而当我在 2012 年找到他时,我之前已经创建了许多公司,开发儿童学习阅读的技术,比如 LeapPad,还做过 Livescribe 智能笔。因此,我看到这个机会,认为可以真正推进眼动交互并开发一个新的 HCI 可穿戴设备和 AR、VR 的模型。于是我开始了一个公司,成立了 Ifluence,获得了一些资金,着手解决这一眼动交互模型的挑战,超越“驻留”和“眨眼”以更有意义的方式进行眼动交互。

如何转化眼动意图

那么,你们是如何翻译眼睛的意图的呢?我们研究了眼睛和大脑之间的连接,研究眼睛的生物力学。我们研究光线是如何通过眼睛流动到视网膜再到中央凹,以及这其中的时机是如何传达到大脑的枕叶区域。然后我们观察到你对不同刺激的反应方式,发现除了驻留或眨眼,还有其他方式可以提供一定形式的控制。因此,最终我们创建了一种语言,寻找我们所称的有目的和无目的的眼动信号。

交互体验

在我进行演示时,屏幕上并没有很多靶标,有些时候感觉好像它在读取我的思想,这让我有一种超现实的感觉。特别是在我转动地球仪时,你让我看不同的国家,我只需看向那个国家,它就会自动旋转这个物体。你能谈谈这个决定,不包含靶标以营造这种神奇的感觉吗?绝对可以。这是我们早期做出的明确选择,非常有意识。因为我们有这种语言,我们有 12 条眼动交互的效能法则,而它们之上的原则就是让你的眼睛做它们应该做的事情。如果我们给你一个靶标,结果就像是追逐你的尾巴,你看到它,去看它,靶标开始移动,随着它移动,你总是盯着它,这会让人感到不安。

与现实的交互

所以,AR 应用特别适合这种场景,你可以看到某个人并与他们面对面,同时能够在技术上进行导航而不需要明确说任何话或点击任何东西。这非常微妙,几乎是不可察觉的。或许你可以谈谈这种设计的那部分,以便创造出一种你能够与另一人保持身体存在的方式,同时又能与技术互动。

是的,如果你想象一下,假设我现在带着一副眼镜,首先我们要尊重社交交流中的干扰敏感性。一旦我们做到这一点,当我们可能偶尔转到礼貌模式时,就不会打断你。但假设我们都承认我们在开会,同时有几个人戴着 AR 眼镜想共享信息。我们围坐在桌子旁,我看着你说:“你给了我一个想法。” 利用我的眼睛,我调出一些信息,这当然会立即呈现在你的屏幕上,而现在我们两个都在看着悬浮在我们眼前的内容。

眼睛疲劳问题

你有没有特别研究眼疲劳的问题?我知道在做某些交互时,我比往常做的动作更多。比如一旦有了按键,我通常可以注视着某个对象选择,但通过眼睛点击时,可能会增加我在屏幕上视线移动的次数。我很好奇你是否研究过疲劳,以及这种界面是否适合长时间使用,比如每天 6 到 8 小时?绝对是的。我们回到一个基本原则,让你的眼睛做它们应该做的事情。

多模态接口

在 TechCrunch Disrupt 上,有关于多模态接口的一些讨论。随着沉浸式技术未来的发展,很多人谈论自然而然地与技术对话。我们与人互动时就是这样。而在某些上下文中,用眼睛进行的某些操作可能更快,有些则用声控更快,还有一些则需结合眼动和按钮操作。当你在审视 Ifluence 如何融入这个生态系统时,似乎 Ifluence 正在引入一种新技术,可以通过眼睛开启许多新能力,而我不期望你能用眼睛完成所有事情。

总结与展望

我们看到了 Ifluence 在推进眼动交互和其软件模型方面的努力,这将为用户带来前所未有的体验。虽然在应用中有些新挑战待解,但这种眼动技术的潜力不可小觑。随着技术的进步,未来的接口将更加自然、流畅,或许会开启全新的交互模式,让人机沟通达到新的层次。

结尾

感谢您收听 Voices of VR 播客。如果您想支持节目,请传播这个消息,告诉您的朋友,并通过 patreon.com/VoicesOfVR 成为我们的支持者。