浙大研究员在单目视频的三维穿衣人体合成中达更先进的视觉质量
单视图穿衣人体重建在虚拟现实应用中占有重要地位,特别是涉及复杂人体运动的环境。然而,实现逼真的服装变形一直是一个挑战。现有方法往往忽略了运动对表面变形的影响,导致表面缺乏全局运动约束。为了克服这一限制,浙江大学和之江实验室团队提出了一个创新的框架,名为MOSS。该框架利用运动学信息在人体表面实现运动感知的高斯分布。框架包括两个模块:KGAS和UID。KGAS使用matrix-Fisher分布传播整个身体表面的运动,增强了重建表面的真实感。UID解决了单视图中的局部遮挡问题,通过识别重要表面并进行几何重建,补偿变形。实验结果表明,MOSS在单目视频的三维穿衣人体合成中具备先进的视觉质量。该研究提高了人体重建的效率和质量,对AR和VR等领域的逼真人体模型的创造具有重要意义。