(PVG)Periodic Vibration Gaussian:自动驾驶过程中的三维重建 论文解读

Periodic Vibration Gaussian: Dynamic Urban Scene Reconstruction and Real-time Rendering

创新点

Periodic Vibration Gaussian (PVG) 模型

引入周期振动动态

动态引入:引入生命峰值 概念,为高斯点赋予不同生命周期,使其能表示动态特性。
原本的3DGS只能用于静态场景,现在引入周期振动动态,将 3DGS 扩展为支持动态场景的 PVG,增加时间维度。
每个高斯点被赋予动态特性,包括振动的中心位置(𝜇)和不透明度(o),这些特性随时间变化,可以有效捕捉动态运动

动态表达式

在这里插入图片描述

动态与静态统一表示

通过静态系数(ρ=β/l)区分静态和动态元素,ρ 较大表示静态点,较小表示动态点。
通过动态属性(如速度、振动方向等)和静态性系数的联合建模,自动区分动态和静态场景元素,无需额外分割操作

时序平滑机制

针对动态场景中的训练数据稀疏性问题,提出了一种基于平均速度(𝑣 )的时间平滑机制,增强了时间维度上的连续性。
通过对相邻时间戳间的高斯点状态进行线性估计,减轻了训练中对光流估计的依赖,降低了计算复杂度。
自监督机制:时间平滑机制结合自监督学习,让模型自动从稀疏的时间序列中学习动态趋势,减少了对人工标注数据的依赖。

位置自适应控制

针对无界场景的空间特性,通过调整高斯点的大小和分布,提高了表示的效率和质量
提出了针对场景范围的高斯点大小自适应调整方法:
在远离相机的地方使用较大的高斯点表示。
在近距离范围内使用更小的高斯点以保留细节。
这种方法显著减少了所需的高斯点数量,提高了表示效率,同时保持了渲染精度。

小tips

天空细化:

用高分辨率可学习环境立方体贴图处理天空高频细节,并在训练时对光线方向扰动增强抗锯齿。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值