英伟达提出从单视图肖像图像重建动画3D化身头部
英伟达的研究团队提出了一种基于单视图图像的一次性3D化身头部重建和动画框架。该框架由三个分支组成,分别用于重建粗略的几何形状、细节外观和表情。首先,使用编码器对源图像进行粗略的3D重建,并通过渲染深度图和神经点云转移细节外观到重建中。然后,使用3DMM模型生成表情渲染,并通过表情分支将表情与重建结合。最后,通过超分辨率模块合成高保真图像。团队在多个数据集上进行了实验和评估,结果表明该方法能够捕获逼真的细节并生成高质量的3D化身头部。与传统方法相比,该方法具有更好的效果和泛化能力,无需额外的测试时间优化。总体而言,英伟达的研究提出的方法在3D化身头部重建和动画方面表现出色。