[发明专利]一种基于残差金字塔的图像融合方法

说明书

本发明公开了一种基于残差金字塔的图像融合方法，本发明首先对来自不同传感器的每一幅配准过的图像分别采用残差金字塔变换进行分解,得到变换域一系列不同尺度、不同方向、方向可调的金字塔子图像序列，根据融合规则,对分解得到的残差金字塔子图像分别进行融合处理,得到融合后图像所对应的残差金字塔子图像；其中融合规则包括低频系数融合规则和高频系数融合规则；对融合所得的残差图像进行金字塔逆变换重构，得到融合图像。本发明有效地融合了高分辨率图像的低频分量信息,消除了融合方法图像中的分块效应,其融合图像边界清楚,在保留光谱信息的同时空间细节信息也得到提高。

技术领域

本发明涉及卷积，反卷积，图像残差，图像融合技术领域，具体涉及一种基于残差金字塔的图像融合方法。

背景技术

目前数字图像技术随着科技的进步得到了很大的发展并得到更加广泛的应用，本文采用一种残差金字塔结构来对图像进行优化处理，图像金字塔是一种以多分辨率来解释图像的有效但概念简单的结构。一幅图像的金字塔是一系列以金字塔形状排列的分辨率逐步降低，且来源于同一张原始图的图像集合。其通过梯次向下采样获得，直到达到某个终止条件才停止采样。金字塔的底部是待处理图像的高分辨率表示，而顶部是低分辨率的近似。层级越高，则图像越小，分辨率越低。

由于拍摄的传感器不同，拍图像光源和信息描述的侧重点也不一样，本文解决的问题是将两幅不同传感器拍摄的同一目标进行图像融合，从而得到一副信息更丰富，更清晰的图像。具体系统流程图如图1所示。

发明内容

本发明针对现有技术的不足，提出了一种基于残差金字塔的图像融合方法。

本发明一种基于残差金字塔的图像融合方法，具体包括以下步骤：

步骤一、图像下采样金字塔的建立

图像下采样金字塔是通过高斯平滑和卷积获得一些下采样图像，也就是说第y层高斯金字塔通过平滑、下采样获得y+1层高斯图像。

设原始的输入图像为A和B，作为图像下采样金字塔的最底层A₀和B₀；分别对A图像和B图像进行卷积；取A图像为例，对A₀进行低通滤波和向下采样，得到图像下采样金字塔的上一层。如此重复，即生成图像A和B的下采样金字塔，其中m，n表示卷积核m 行n列对应的像素，i，j表示图像第i行第j列对应的像素。：

其中0＜l≤N，0＜i≤C_l，0＜j≤R_l；w(m，n)对应一个5x5的卷积核且满足可分离性、归一性、对称性和奇偶项四个约束条件，C_l表示下采样金字塔第l层图像的行数，R_l表示下采样金字塔第l层图像的列数，N表示下采样金字塔层层数。

步骤二：图像上采样金字塔的建立

图像上采样金字塔是通过反卷积的方式获得一些上采样的图像。

上采样就是将图像在每个方向扩大为原来的两倍，新增的行和列以0填充，然后使用w(m，n)与放大后的图像进行反卷积，获得新增像素的近似值；分别对步骤一处理后的图像进行上采样；以经步骤一处理后的A图像为例：从图像上采样金字塔的最顶层A_N开始对其进行高斯卷积核滤波，再进行上采样，得到图像金字塔F_N-1层。如此重复，即可得到步骤一处理后的图像的上采样金字塔。其中图像A经步骤一处理后的图像上采样金字塔的最顶层F_N为图像下采样的最顶层A_N，即：

其中0＜l≤N，0＜i≤C_l，0＜j≤R_l；

步骤三：残差金字塔的建立