【论文笔记】3DGS压缩相关工作2篇

1. 背景介绍：NVS

神经辐射场（NeRFs）引入了一种基于多层感知机（MLP）的新型隐式场景表示方法，它将体密度编码作为几何形状和方向辐射的代理量。渲染通过光线行进的方式来执行。这一解决方案为新视图合成（NVS）带来了前所未有的视觉质量，但代价是训练多层感知机的优化过程极为耗时，且渲染速度很慢。有几种方法加速了训练和渲染过程，通常是利用空间数据结构或者像哈希这样的编码方式，不过牺牲了视觉质量。
近期，三维高斯飞溅（3DGS）提出了一种在空间中使用三维高斯基元的显式表示方法，每个基元都带有一组属性，如位置、协方差（各向异性缩放和旋转）、不透明度以及球谐（SH）系数，以此来表示方向辐射。三维高斯飞溅结合了此前所有方法在性能方面的优势：训练速度快、视觉质量高，并且是首个能在不降低质量的情况下实现实时渲染速度的方法。然而，原始方法会导致一种内存占用高得离谱的表示形式（对于所呈现的场景而言，内存占用达700M至1.2G）。这样的内存占用对于存储和处理来说是个问题，而且对于向移动设备进行流式传输来说更是难以承受。