苹果介绍Vision Pro基于神经科学技术的手眼协调控制
据映维网报道,苹果在开发者会议中分享了其首款XR头显Vision Pro的具体细节。这款头显不依赖物理控制器,而是通过眼睛和双手与虚拟对象进行交互。在眼睛方面,使用先进的眼动追踪系统和机器学习技术,将眼睛注视点作为光标,实现自然的导航和操作。用户可以通过注视元素来触发界面响应,如浏览图标、注视菜单栏等。而在双手方面,苹果介绍了一系列常用手势操作,包括点击、双击、捏合等,用于操作虚拟元素、滚动窗口等。此外,苹果还演示了手眼协调技术,利用眼动追踪和机器学习预测用户希望执行的手势操作。演示中展示了在观看自然景色图片时,系统预测用户希望放大的区域,并在用户执行放大手势时快速响应。苹果提倡将手放在膝盖上操作,以减轻长时间悬空操作的疲劳。这种眼手协调的交互方式可以带来无缝、流畅且自然的体验。