研究人员提出3D视线预测技术,让AR设备预知抢先渲染场景
美国佐治亚理工学院交互计算学院团队正在研究通过第一人称视角预测用户在3D环境中的视线轨迹,旨在提升AR眼镜的交互体验。传统眼镜只能被动响应视线,而该方法使设备能够提前预判用户的视线和交互目标,进而主动渲染相关场景。研究通过3D框架解决视线预测问题,利用历史视频帧、头部姿态和视线观测值作为输入,采用基于Transformer的架构进行建模。实验结果显示,该技术能预测最多三秒的未来视线,在特定情况下可达十秒,为AR系统提供更丰富的交互体验。