[发明专利]一种基于深度神经网络的眼底图像拼接方法

权利要求书

1.一种基于深度神经网络的眼底图像拼接方法，其特征在于，包括如下步骤：

S1：读取采集到的多张眼底图像，将所有眼底图像采用U-NET算法处理为眼底血管图；

S2：对眼底图像和眼底血管图进行去黑框处理；

S3：通过预先训练过的深度神经网络确定基准图及初步判断眼病的类型，并赋予每张眼底图像一个标签，标签上记载有该眼底图像是否为基准图、该眼底图像相对于基准图的位置、以及用int型数据表达的该眼底图像是否带有病灶及眼病类型；

S4：采用SURF(Speed-Up Robust Features)算法、HOG(Histogram of OrientedGradient)算法和LBP(Local Binary Pattern)算法提取所有眼底图像和眼底血管图的特征点，并对同时满足上述三种算法、满足上述三种算法中任意两种算法或满足上述三种算法中任意一种算法的特征点赋予不同的权重值，对带病灶图像上的特征点根据眼病的类型额外增加权重值；

S5：对上述所有特征点进行匹配，匹配完成后，将眼底血管图匹配的特征点对转换为相对应的眼底图像的特征点对，并对重合的特征点对的权重值重新进行计算；

S6：按照优先保留权重值大的特征点对的原则，采用RANSAC(Random SampleConsensus随机抽样一致性)算法对所有特征点对进行筛选；

S7：将图像切割成无数小方块，采用DLT(Direct Linear Transformation-DLT)算法，对每个小方块的特征点对进行透视变换矩阵计算，然后将图像按照标签上相对于基准图的位置关系进行局部精准拼接，拼接时如出现重叠区域则保留基准图部分；

S8：将拼接好的图像消除拼接缝隙，然后输入到深度神经网络对眼部疾病类型的int数据进行检测，如果检测到的int数据的数值与S2步骤中带有病灶的那张图像的int数据的数值相同，则完成拼接；如果检测到的int数据的数值与S2步骤中带有病灶的那张图像的int数据的数值不相同，则选择带病灶的那张眼底图像作为基准图按上述步骤重新进行图像拼接，直至拼接好的图像的int数据的数值与S2步骤中带有病灶的那张图像的int数据的数值相同，则完成图像拼接。

2.根据权利要求1所述的基于深度神经网络的眼底图像拼接方法，其特征在于：步骤S2中去黑框处理采用的方法是对图像矩阵的每一行进行检测，去掉所有值为零的像素点。

3.根据权利要求1所述的基于深度神经网络的眼底图像拼接方法，其特征在于：步骤S6中所述RANSAC算法在统计和输入特征点时按权重值取值。

4.根据权利要求1所述的基于深度神经网络的眼底图像拼接方法，其特征在于：步骤8中采用加权平均消除拼接缝隙。