Insider Insider
3dnchu 尚无浏览 2 分钟阅读

4D Gaussian Splatting for Real-Time Dynamic Scene Rendering – 动态3D高斯点云场景学习与轻量实时播放技术!

由华中科技大学和Huawei的研究者等提出的,用于动态3D高斯点云场景学习与轻量实时播放的技术『4D Gaussian Splatting for Real-Time Dynamic Scene Rendering』

4D Gaussian Splatting for Real-Time Dynamic Scene Rendering

4D-GS可以在20分钟以内学习动态场景,并在一块RTX 3080 GPU上达到50fps以上的视图渲染速度。
动态场景的表征与渲染是一个重要但困难的课题。特别是,为了准确建模复杂运动,通常很难同时保持较高的效率。我们引入4D高斯点云渲染(4D-GS),以在享受高学习效率和存储效率的同时,实现实时动态场景渲染。为了同时对高斯运动和形状变形进行建模,我们构建了高效的变形场。为了生成更准确的位置和形状变形,我们通过HexPlane连接相邻的不同高斯。我们的4D-GS方法在RTX 3090 GPU上,以800*800分辨率实现了70FPS的高分辨率实时渲染,同时保持了与传统最先进方法相当甚至更高的质量。4D-GS可以在20分钟以内学习动态场景,并在一块RTX 3080 GPU上达到50fps以上的视图渲染速度。

据说在RTX 3090 GPU上,以800*800分辨率可实现70FPS运行。
这类技术今后也会不断发展吧。拍摄后还能轻松修改相机角度的时代,应该很快就会到来吧。

链接

4D Gaussian Splatting for Real-Time Dynamic Scene Rendering

Github

Screenshot of guanjunwu.github.io

Screenshot of github.com