[发明专利]一种基于残差金字塔的图像融合方法

摘要

本发明公开了一种基于残差金字塔的图像融合方法，本发明首先对来自不同传感器的每一幅配准过的图像分别采用残差金字塔变换进行分解,得到变换域一系列不同尺度、不同方向、方向可调的金字塔子图像序列，根据融合规则,对分解得到的残差金字塔子图像分别进行融合处理,得到融合后图像所对应的残差金字塔子图像；其中融合规则包括低频系数融合规则和高频系数融合规则；对融合所得的残差图像进行金字塔逆变换重构，得到融合图像。本发明有效地融合了高分辨率图像的低频分量信息,消除了融合方法图像中的分块效应,其融合图像边界清楚,在保留光谱信息的同时空间细节信息也得到提高。

主权项

1.一种基于残差金字塔的图像融合方法，其特征在于，该方法具体包括以下步骤：步骤一、图像下采样金字塔的建立图像下采样金字塔是通过高斯平滑和卷积获得一些下采样图像，也就是说第y层高斯金字塔通过平滑、下采样获得y+1层高斯图像；设原始的输入图像为A和B，作为图像下采样金字塔的最底层A₀和B₀；分别对A图像和B图像进行卷积；取A图像为例，对A₀进行低通滤波和向下采样，得到图像下采样金字塔的上一层；如此重复，即生成图像A和B的下采样金字塔，其中m，n表示卷积核m行n列对应的像素，i，j表示图像第i行第j列对应的像素；其中0＜l≤N，0＜i≤C_l，0＜j≤R_l；w(m，n)对应一个5x5的卷积核且满足可分离性、归一性、对称性和奇偶项四个约束条件，C_l表示下采样金字塔第l层图像的行数，R_l表示下采样金字塔第l层图像的列数，N表示下采样金字塔层层数；步骤二：图像上采样金字塔的建立图像上采样金字塔是通过反卷积的方式获得一些上采样的图像，上采样就是将图像在每个方向扩大为原来的两倍，新增的行和列以0填充，然后使用w(m，n)与放大后的图像进行反卷积，获得新增像素的近似值；分别对步骤一处理后的图像进行上采样；以经步骤一处理后的A图像为例：从图像上采样金字塔的最顶层A_N开始对其进行高斯卷积核滤波，再进行上采样，得到图像金字塔F_N‑1层；如此重复，即可得到步骤一处理后的图像的上采样金字塔；其中图像A经步骤一处理后的图像上采样金字塔的最顶层F_N为图像下采样的最顶层A_N，即：其中0＜l≤N，0＜i≤C_l，0＜j≤R_l；步骤三：残差金字塔的建立残差金字塔是在图像金字塔的基础上建立的；将图像金字塔下采样后的第A_l层与图像金字塔上采样后的第F_l层做差值得到对应差值图像第G_l层，即为原图像的高频边缘信息；通过重复上述过程多次得到图像A和B的残差金字塔；以A图像为例，其中残差金字塔A′最顶层与图像金字塔顶层保持一致，即：步骤四、图像融合将上述图像A和B转化后的残差金字塔A′和B′进行融合，得到一个新的残差金字塔子图像；其中融合规则包括低频系数融合规则和高频系数融合规则；步骤五、残差金字塔逆变化为了得到重构后的图像，需将步骤四得到的转化后的残差金字塔逆变化得到重构图像，设融合后的残差金字塔为K，K_l表示重构后残差金字塔的第l层，其中0≤l≤N，于是计算公式为：累加得到输出图像Z。