Meta等研究员提出从视频重建动态辐射场的算法RoDynRF
在生活中,我们经常用视频捕获和保存一些值得纪念的时刻。然而,在查看普通视频时,我们只能从固定的视点感知场景,并不能交互式地导航场景。为了解决这个问题,研究人员提出了一种动态视图合成技术,可以从任意摄像机角度和视点创建动态场景的逼真新视图。而现有的方法通常假定通过运动构造SfM算法可以可靠地估计出准确的摄像机姿态,但这种方法并不一定可靠,因为SfM算法经常失败或在具有挑战性的视频中产生错误的姿态。因此,研究人员提出了一种名为RoDynRF的算法,它可以从视频重建动态辐射场而无需精确的camera姿势作为输入。该方法通过联合估计静态和动态辐射场以及摄像机参数,解决了这个鲁棒性问题,并具有比目前最先进的动态视图合成方法更好的性能。这种动态视图合成系统可以实现自由视点视频,并允许用户与视频进行交互,是虚拟现实等创新应用的重要技术。