高通专利提出基于NIR图像的头戴设备遮挡面部网格生成方法
高通在其专利申请中提出了一种解决XR系统中头显遮挡面部网格生成的问题的方法。由于用户面部被头显遮挡,NIR摄像头获取的图像与传统的RGB图像存在域差异,导致难以实时生成表情连贯的虚拟化身。该方法通过基于合成近红外图像训练机器学习模型,捕获主体图像生成训练所需的网格,并生成合成NIR头显用户图像,从而提升网格模型的细节和准确性。
Insider