作为继 NeRF 和 3DGS 之后的技术,『Binary Opacity Grids: Capturing Fine Geometric Detail for Mesh-Based View Synthesis』正受到关注。
Binary Opacity Grids: Capturing Fine Geometric Detail for Mesh-Based View Synthesis
基于表面的视图合成算法由于计算需求较少而具有吸引力,但往往难以再现细小结构。另一方面,将场景几何建模为体积密度场(例如 NeRF)的更高成本方法,在重建细微几何细节方面表现更好。然而,密度场通常以“模糊”的方式表示几何,妨碍表面的精确定位。在这项研究中,我们修改密度场,使其趋向于表面,同时不损害细小结构的重建能力。首先,我们使用离散的不透明度网格表示,而不是连续的密度场,使不透明度值能够在表面处从零不连续地跃迁到一。其次,通过对每个像素投射多条光线进行抗锯齿处理,可以在不使用半透明体素的情况下建模遮挡边界和亚像素结构。第三,通过最小化不透明度值的二进熵,促使训练结束时不透明度值二值化,从而便于提取表面几何。最后,我们在融合式网格化策略之后,开发了网格简化和外观模型拟合方法。由我们的模型生成的紧凑网格可以在移动设备上实时渲染,并且与现有的基于网格的方法相比,达成了显著更高的视图合成质量。
这个领域的技术更新真快啊。
NeRF、3D Gaussian Splat 的细节已经提升了不少,但这次的技术变成了方便实用的 3D 网格,个人来说还是挺高兴的。项目页面上还公开了可以在浏览器中查看的演示。
BOG 这个缩写今后会流行起来吗?很期待。
链接
Binary Opacity Grids