清华&华为联合中科院！首个基于3D高斯分布的大场景高保真重建和实时渲染方法

作者：小柠檬 | 来源：3DCV

原文：清华&华为联合中科院！首个基于3D高斯分布的大场景高保真重建和实时渲染方法

现有的基于 NeRF 的大场景重建方法通常在视觉质量和渲染速度方面存在局限性。虽然最近的 3D 高斯溅射在小规模和以对象为中心的场景中效果很好，但由于视频内存有限、优化时间长和明显的外观变化，将其扩展到大型场景会带来挑战。为了应对这些挑战，我们提出了 VastGaussian，这是第一个基于 3D 高斯分布在大型场景上进行高质量重建和实时渲染的方法。我们提出了一种渐进式分区策略，将大场景划分为多个单元，其中训练摄像机和点云按照空域感知可见性标准正确分布。这些单元经过并行优化后合并成一个完整的场景。我们还将解耦外观建模引入优化过程中，以减少渲染图像中的外观变化。我们的方法优于现有的基于 NeRF 的方法，并在多个大型场景数据集上实现了最先进的结果，从而实现了快速优化和高保真实时渲染。