Facebook展示如何在AR/VR场景中重建玻璃、镜面场景,将镜子带到虚拟世界
研究人员利用基于Kinect类传感器的主动式扫描技术成功重建室内场景,包括镜子和玻璃等反射表面。镜子的完美反射面对重建系统是一个难题,因为镜子的镜像与镜子背后的真实几何体重叠并干扰重建。为了解决这个问题,研究人员在捕捉设备上添加了只有在镜子或玻璃表面前才可见的标签,通过这个标签的观察,不仅可以检测到反射表面,还可以稳健地估计表面的平面参数。此外,研究人员还开发了一种基于多特征的方法来检测镜面边界。研究人员在不同类型的镜子和玻璃表面上演示了系统的效果。该系统的应用有望在虚拟现实领域实现更真实的场景,并且可以用于训练数据采集和检测反射表面。论文标题为《Reconstructing Scenes with Mirror and Glass Surfaces》。