微软AR/VR专利为图像拖影提出补偿摄像头全局运动和对象局部运动解决方案
MR系统可以通过执行时间过滤来提高图像质量。时间过滤是将多个时间点捕获的数据组合在一起以生成特定输出的过程。微软提出了一种名为“Advanced temporal low light filtering with global and local motion compensation”的专利申请,描述了一种生成时间滤波图像的技术。该方法包括获取历史帧和当前帧,对历史帧进行全局运动补偿操作,识别表示移动对象的像素,并计算光流矢量来将像素移位到新位置。然后,在历史帧中的新位置对应于当前帧中识别的位置。通过这种方式,可以通过历史帧和当前帧的时间滤波来生成具有改进质量的聚合图像。该技术还涉及使用IMU数据对全局运动进行补偿,并使用分割和光流计算来补偿对象的局部运动。最终,通过对历史帧和当前帧进行时间滤波处理,可以生成图像质量更高的聚合图像。该专利申请最初于2022年提交,并于2023年公布。