逼真面部搞怪表情!Facebook升级VR化身技术Modular Codec Avatars
Facebook的研究机构Facebook Reality Labs(FRL)开展了虚拟化身的研究工作,并致力于实现超越“恐怖谷效应”的效果。FRL的最新研究探索了面部表情支持,在虚拟现实中实现朋友能准确看到对方的搞怪表情。当前大多数虚拟化身都是卡通风格,主要是为了避免“恐怖谷”问题。FRL的“Codec Avatar”项目旨在通过机器学习和计算机视觉创建超逼真的用户复刻,以跨越“恐怖谷效应”。现在FRL的研究人员提出了一个新的解决方案,名为“Modular Codec Avatars”,根据单个面部特征划分任务,通过合成多个不同姿态的最佳匹配来精确呈现面容姿态。这个方法的优势是能够自然灵活地重现新面部表情,而不需要对这些特定表情进行训练。此外,Modular Codec Avatar系统还能消除穿戴头显时的眼睛姿态差异,提高面部的真实感。这种方法具有重建面部的实用性,并可在较少的训练数据下实现更高的表现力。未来,用户可能通过智能手机应用捕捉自己的面部模型,并将其作为虚拟化身的基础。