通过一张脸部照片生成用于实时渲染的头像模型!SIGGRAPH Asia 2017 论文!
Avatar Digitization From a Single Image For Real-Time Rendering (SIGGRAPH Asia 2017)
我们提出了一种完全自动化的框架,可从单张非受限图像中将头发数字化为完整的3D头部。我们的系统为游戏和社交VR应用中的头像个性化提供了实用且对消费者友好的端到端解决方案。重建的模型包含二级元素(眼睛、牙齿、舌头、牙龈),并提供适合动画的 blendshape 和基于关节的 rig。生成的人脸是高质量的纹理网格,但我们提出了一种多样且高效的多边形条带(polystrip)表示。Polystrip 适用于非常广泛的发型和纹理,并与用于实时渲染的现有游戏引擎兼容。我们不仅整合了最先进的面部形状建模和外观推断技术,还提出了一种新的单视图头发生成流程,基于3D模型和纹理检索、形状修正以及 polystrip patch 优化。我们的发型检索性能通过使用深度卷积神经网络进行语义头发属性分类得到增强。生成的模型在视觉上可与专业艺术家设计的最先进游戏角色相媲美。在实时场景中,我们展示了 polystrip 在处理发型变化方面的可用性,相较于传统的基于 strand 的表示更具优势。我们还进一步展示了我们的方法在大量野外拍摄图像上的有效性,并展示了任何人都能轻松创建吸引人的头像。
Google翻译
能够生成略带夸张风格的头像模型!
头发的还原度很棒呢。
如果能在游戏等中实现就太好了……
对于带有角色创建功能的游戏来说,想把头像做得和自己很像的人(比如我)来说,应该会有相当大的需求。