Facebook详谈脑机接口成果:全天候可穿戴AR眼镜强大输入方式

Facebook Reality Labs最近通过一篇博文介绍了他们的脑机界面(BCI)研究团队和最新进展。该团队的目标是开发一种非侵入性、无声的语音界面,允许用户通过意念进行文本键入。他们使用脑电图和功能性磁共振成像等技术来探索大脑活动与言语产生之间的关系,并希望将这种技术应用于可穿戴的AR眼镜,改变人们与技术的交互方式。目前,他们已经取得了一些重要的进展,如能够以几乎实时的速度解码大脑构思的言语,并实现口语单词和短语的实时解码。然而,要实现完全非侵入性的解决方案还需克服许多挑战,如改进设备的体积和速度,并确保设备的安全性和适用性。他们还在探索使用近红外光和其他非侵入性技术来检测大脑活动的方法。尽管还有许多道德问题需要解决,但该团队承诺以负责任的方式推进创新,并致力于确保技术的公开透明和广泛适用性。最终,他们希望脑机接口成为未来全天候可穿戴AR眼镜的主要输入方式。
Facebook详谈脑机接口成果:全天候可穿戴AR眼镜强大输入方式

2019年07月31日美国专利局最新AR/VR专利报告

美国专利及商标局最近公布了一批全新的AR/VR专利。以下是其中的15篇专利摘要: 1. Magic Leap的专利涉及用于卫生系统和医疗保健应用的设备,可以诊断和治疗患者,例如通过眼睛的像差计诊断方法和系统。 2. Facebook的专利描述了用于校准电子显示器亮度的系统,通过亮度检测组件和控制组件来实现。 3. Facebook的专利涉及低功耗高亮度的集成式彩色LED微型显示器以及其制造方法。 4. Facebook的专利涉及全景相机系统,可以捕获环境的双目全景视图。 5. 微软的专利介绍了在增强现实和虚拟现实系统中自动程序架构,根据用户的工作流程和情绪状态选择自动程序,并将其注入到用户的工作流程中。 6. 微软的专利涉及用于3D渲染的选择性表面网格再生,根据近距离和用户视角选择性地生成更新的表面网格。 7. 微软的专利描述了近场对象在虚拟环境中的无限远场深度感知方法和系统,通过立体投影变换将近场对象呈现为远场对象。 8. 微软的专利涉及MEMS扫描显示设备,通过扫描镜系统和控制组件来控制光线扫描,形成图像。 9. 苹果的专利涉及在真实环境中描绘虚拟对象的方法和设备,通过录制组件生成真实环境的图像并将虚拟对象合并到图像中。 10. 谷歌的专利涉及包括衍射组合器和眼动追踪传感器的头戴式显示器,实现眼动追踪和显示的集成。 11. 谷歌的专利描述了在增强现实和虚拟现实环境中进行对象追踪的方法和系统,识别环境对象位置并在虚拟环境中呈现。 12. 索尼的专利涉及增强现实图像处理装置和方法,通过图像剪切和分离等处理来合并真实环境和虚拟图像。 13. 索尼的专利描述了图像处理装置和方法,根据图像识别处理的结果生成虚拟图像。 14. 索尼的专利涉及头戴式显示器,通过姿势指定单元控制发光单元的亮度,并根据头部运动数据调整图像扫描速率。 15. 英特尔的专利涉及宽频平坦光学元件,通过多层超表面堆叠实现所需的折射率对比度。
2019年07月31日美国专利局最新AR/VR专利报告

Facebook脑机新成果:迅速读取大脑构思单词,进一步解码AR/VR全新交互

Facebook在加利福尼亚大学旧金山分校的研究人员的帮助下更新了他们的未来派脑机项目。研究人员通过植入性电极解码人类思维的实验,证明系统能够“读取”大脑构思的单词和短语。这使得Facebook离实现非入侵性的思维读取系统更近了一步。实验中,研究人员向被试播放了一系列的多选题,并要求他们大声诵读答案。电极阵列记录大脑中与理解语言和产生语言相关的部分活动,并寻找与特定单词和短语实时匹配的模式。系统的准确度在61%至76%之间,期望概率为7%至20%之间。然而,系统目前只能识别非常有效的字词,并且实验只询问了九个问题。这项技术可能有助于改善因瘫痪或其他问题而无法说话的患者的生活。
Facebook脑机新成果:迅速读取大脑构思单词,进一步解码AR/VR全新交互

PTC为格罗方德半导体员工提供HoloLens AR培训解决方案

美国的PTC公司宣布与半导体芯片制造商GlobalFoundries达成重要合作,为后者提供增强现实(AR)解决方案。总部位于加州圣克拉拉的GlobalFoundries将使用PTC的AR软件Vuforia来培训员工。通过在AR眼镜上叠加真实动画,员工能够准确判断复杂机器中的阀门,并避免错误操作造成的高昂代价。GlobalFoundries积极部署AR解决方案,以改善全球制造工厂的生产流程和效率,包括数字化标准的操作程序培训、远程专家协助和构建AI引擎的数字孪生。通过结合Vuforia Expert Capture和Vuforia Studio,GlobalFoundries可以通过AR创建数字培训体验,并利用微软HoloLens 2和RealWear HMT-1等设备进行实操。AR体验可用于提高工厂车间的效率水平和业务成果,包括新人入职培训、现有技术人员的再培训以及保留老员工的专业经验。GlobalFoundries表示,在试点阶段已经取得了成功,培训时间减少了50%。PTC的增强现实解决方案将帮助GlobalFoundries解决制造业工人技能差距的关键问题,提高工作效率和生产力,并降低错误风险。
PTC为格罗方德半导体员工提供HoloLens AR培训解决方案

原Valve VR、Xbox工程师Nat Brown加盟苹果

Valve's former VR engineer and co-creator of Xbox, Nat Brown, has joined Apple. Although specific details have not been disclosed, Brown expressed his excitement to continue his interest in graphics and collaborate with all those using graphics on the Apple platform. Brown was one of the first engineers to work on Microsoft's original Xbox and has recently been focused on VR, including working with Valve and serving as an advisor for the VR platform VREAL. Apple has a primary focus on the AR field, with rumors suggesting that the 2020 iPhone will feature a time-of-flight sensor and that the company may release an AR headset that relies on the iPhone for processing power. While AR has lower performance requirements compared to VR, it still puts pressure on the graphics processor as it needs to match the surrounding environment and avoid causing motion sickness in users. Apple unveiled ARKit 3, a tool for developers to create augmented reality content for iOS devices, at WWDC 2019. Brown's tasks at Apple may be related to ARKit and/or the future Apple headset.
原Valve VR、Xbox工程师Nat Brown加盟苹果