图像融合之多波段融合（Multiband Blending）/拉普拉斯金字塔融合（Laplacian Pyramid Blending）

多波段融合又叫拉普拉斯金字塔融合。

多波段融合的思想是对待融合的图像分别构建拉普拉斯金字塔，（拉普拉斯算子可以提取出图像的高频信息，在拉普拉斯金字塔中，越往上层的图像越高频）然后对同一层图像按照某种规则融合，一般是Alpha blending/Feathering；对于不同层图像（不同频率段的图像）进行不同规则的融合，高频部分blend slowly，低频部分blend quickly；对融合后的图像金字塔重建得到最终结果图[1][2]。

 

Alpha Blending/Feathering:

如何blend：1. 直接对overlap区域average；2.找到center seam然后blur seam

这里最关键点是如何设置window size，window size的设置会对融合效果影响很大：

最佳window应该使融合后的图像smooth but not ghosted。在上面就是第三副图。

从图像结构特征上考虑，最佳window的约束是这样的：

1.避免产生缝需要：window = size of largest prominent feature

2.避免产生鬼影需要：window <= 2*size of smallest prominent feature

 

在频域上上述约束就很好考虑了，融合窗的最大频率要<= 2*size of smallest frequency。

如果信号的带宽很小，频率都集中在一小块，很好做决定，但是图像的频率带宽很大，分布范围很广，这时候就不好确定窗的大小了。这个问题的解决方法就是分频带（band）进行Feather。这种方法在空间域就能方便的实现，就是使用带通滤波器（或者等效带通滤波器的方法）作用于图像得到Bandpass Images。

Pyramid Blending就是其中一种优秀的实现方法。