三维重建——倾斜影像近地细节恢复

匹配地面街景的倾斜摄影全空间信息恢复研究
宋文平1，杨志强1，计国锋1，童雅妮2，高歌2
( 1． 长安大学测绘与空间信息研究所，陕西西安710064; 2． 陕西国土测绘工程院，陕西西安710064)

这篇文章发表在 测绘通报. 2015年S1期 第187-191页 北大核心 的文章就是将倾斜摄影和地面街景进行有机的耦合，得到完整的空间信息。

 

存在的问题：基于多视图倾斜测量的三维重建技术具有高效、成本低的特点，但在近地面往往存在细节失真，模糊的问题。因此重建出的三维模型，在近地部分总是存在形变的。如下图所示。目前在倾斜三维重建这一块，现在的技术还无法解决近地面形变问题。所以，只能通过其他方法对地面细节进行恢复。

 

作者用倾斜影像和近地影像分别进行三维重建，然后将近地影像重建好的地物模型定位到倾斜影像重建出的模型中，实现几何和纹理的恢复。

1. 作者首先分析了倾斜摄影存在的问题：

• 由于建筑物等地面实体的遮挡，造成了近地面数据的丢失，特别是近地面的路灯、围栏、行道树等近地面数据；
• 由于倾斜摄影角度等不同，其在地面数据上的鉴别效果也不一样。这就造成了近地面数据的细节不清晰，特别是行道上的
  招牌字、行道树、居民窗户等近地面细节；
• 倾斜摄影测量的近地面模型有空洞，并且其表面模糊粗糙。由于这种原因，造成了其在近地面模型无法量测或量测的精度较低。

2. 比较了倾斜摄影和地面摄影的不同之处：

 

3. 给出了解决办法并指出难点：

将倾斜摄影与地面街景技术进行有机的契合，建立空地全方位信息一体化可量测模型来进行全方位空间信息的提取。两者融合最大的难点在于街景相机位置和姿态要足够精确。

1. 倾斜相机的架设方法：将倾斜相机安装在空中的无人机等平台上，向下按规程拍摄就是倾斜摄影; 将此倾斜相机倒过来安装在地面的车上，向上拍摄来获取地面街景的影像序列。这样利用相同的计算机视觉方法，就会获得相对精度较高的相机初始位置和姿态数据信息。
2. 改进普通的地面街景：不把GPS 和惯导综合系统获取的位置和姿态作为其相机的最终位姿，而是将GPS 和惯导综合系统获取的位置和姿态作为初始值，采用一定的优化算法进行优化，将优化后的相机的位姿作为其最终的位姿。首先对街景图像序列进行获取，然后利用并行sift 算法、并行ＲANSAC 算法结合来进行特征点的提取、同名点的匹配、初始相机位置姿态的求取，并利用获取的初始相机位置姿态来计算街景图像序列的初始结构，再基于并行捆集调整算法来对街景图像序列进行整体的捆集调整，最后基于并行多视图匹配算法求得相机的最优化位置姿态和完整的场景结构。
3. 细节信息提取：在倾斜影像建模的基础上，以倾斜摄影基本原理为基础，利用地面街景技术进行精确定向，从而进行精细建模。细节提取1: 丢失的垃圾桶信息。细节提取2: 街面字幕信息提取

 

 

但是地面影像采集需要再次耗费时间和人力，而且需要用地面影像再次建模，有没有不需要进行地面影像采集的方法？

一点想法，不成熟：

后面实验有成果了，再好好整理一下