[发明专利]基于卷积神经网络进行特征提取的图像匹配方法

说明书

本发明涉及深度学习和图像领域，为取得较好的匹配效果。为此，本发明采取的技术方案是，基于卷积神经网络进行特征提取的图像匹配方法，步骤如下：1)图像预处理。2)深度学习卷积神经网络；3)图像块特征匹配；4)对图像块进行特征点选取与匹配，采用由后向前的策略依次推断每层的特征点位置，并根据匹配点坐标的位置对两幅图片进行匹配。本发明主要应用于图像处理场合。

技术领域

本发明涉及深度学习和图像领域，尤其涉及在图像处理应用中，通过对图片特征进行提取来实现常规图片的匹配问题。具体涉及基于卷积神经网络进行特征提取的图像匹配方法。

背景技术

数字图像匹配是数字图像处理中的关键技术之一，是其他一些数字图像处理，如全景视频、智能视频监控等的基础，如何实现高速高质量的图像匹配，对于整个系统而言都是至关重要的。

图像特征匹配的理论是对图像进行特征点选择和提取，然后对提取的特征点之间进行匹配，从而找出源图像和目标图像之间的仿射矩阵，利用仿射矩阵便可将二者进行匹配从而得到高精度广角度的更大范围的匹配图像。

在图像匹配技术中，往往容易出现错误匹配的情况，也就是在图像特征点选择和提取时提取的特征点并不准确，进而导致了匹配失败，使得匹配出来的结果出现较大偏差。传统的Harris角点检测方法是通过在图像上取一个滑动窗口，不断的移动这个窗口并检测窗口中的像素变化情况，当遇到角点时，窗口在横纵两个方向上均会产生较大的像素变化，从而找出图片中的特征点。但是当图片中角点等特征不明显时，会影响到特征点的准确提取与特征点的匹配。

随着图像匹配技术正朝着更优化的拼接融合方向不断发展，为了顺应这种发展趋势，大量的图像匹配算法被研究并改进，主要工作是围绕图像的配准程度方面进行的，通过对特征提取算法进行改良，使得算法两幅图片的差异分析更加精确，从而实现图像之间的匹配。此过程可以通过深度学习方法来实现，使得在一些特征不明显的情况下，通过对图像不同层次特征的提取依然可以达到提高精度的目的，从而提高了图像匹配的质量。

发明内容

为克服现有技术的不足，本发明旨在提出一种基于深度学习卷积神经网络进行特征提取的图像匹配方法。该方法依据深度学习网络提取的不同层次的图像特征作为图像间相互匹配的依据，在角点等传统特征不明确的情况下，依然可以取得较好的匹配效果。为此，本发明采取的技术方案是，基于卷积神经网络进行特征提取的图像匹配方法，步骤如下：

1)图像预处理

首先对准备进行特征匹配的两幅图像进行图像分割处理，将图片分割成多个正方形图片；

2)深度学习卷积神经网络

将第一步中选取的第一幅图分割后的图片与第二幅图所有的分割图片作为输入，输入至训练后的卷积神经网络中，保存每幅输入图片在卷积神经网络第二层、第四次以及第六层的输出信号，并以卷积神经网络第二层、第四次以及第六层的输出信号为分割后图片的特征，进行进一步匹配，寻找特征点；

3)图像块特征匹配

将第2)步的输出信号转换为向量形式，对两幅图片分割出的图像块之间的同层图片特征向量进行比对，

首先用如下公式计算第一幅图片与第二幅图片分割后的所有图片同网络层输出向量之间的相关系数

其中，E(x)为求X的均值运算，X为第一幅图片经过网络层的输出向量，D(x)为求X的方差运算，Y为第二幅图片经过网络层的输出向量，选出第二幅图分割后的与第一个图片中随机选取三幅分割后的图片A₁，A₂，A₃在三层网络相关系数总和最大的分割图片为B₁，B₂，B₃，得到与原始图片相匹配的第二幅图片的图像块；