[发明专利]胶囊内镜图像序列关键帧确定方法及系统

权利要求书

1.一种胶囊内镜图像序列关键帧确定方法，其特征在于，所述胶囊内镜图像序列关键帧确定方法包括以下步骤：

对胶囊内镜图像序列中的图像进行遍历，并获取遍历到的当前图像和所述当前图像的下一帧图像；

分别对所述当前图像和所述当前图像的下一帧图像进行镜像处理，获得处理后的图像对；

根据预设SiameseCF网络模型对所述处理后的图像对中的每帧图像进行位置匹配，获得位置匹配结果；

根据所述位置匹配结果确定所述当前图像和所述当前图像的下一帧图像之间的图像相似度；

在遍历结束时，根据获得的所有图像相似度确定所述胶囊内镜图像序列中的关键帧图像。

2.如权利要求1所述的胶囊内镜图像序列关键帧确定方法，其特征在于，所述根据预设SiameseCF网络模型对所述处理后的图像对中的每帧图像进行位置匹配，获得位置匹配结果的步骤，包括：

将所述处理后的图像对中的每帧当前图像作为参考图像，所述参考图像的下一帧图像作为目标图像；

基于预设间隔从所述参考图像中提取预设尺寸的图像块；

将提取的所述图像块和所述目标图像输入至预设SiameseCF网络模型中进行特征提取，获得特征提取结果；

根据所述特征提取结果确定所述参考图像中所有图像块在所述目标图像中的最佳偏移位置；

根据所述最佳偏移位置确定位置匹配结果。

3.如权利要求2所述的胶囊内镜图像序列关键帧确定方法，其特征在于，所述根据所述位置匹配结果确定所述当前图像和所述当前图像的下一帧图像之间的图像相似度的步骤，包括：

根据所述最佳偏移位置确定所述参考图像与所述目标图像之间的图像匹配块；

根据所述图像匹配块通过集成描述器确定图像块的位置分布相似度及纹理相似度，并根据所述图像块的位置分布相似度及纹理相似度确定所述参考图像和所述目标图像之间的图像相似度。

4.如权利要求3所述的胶囊内镜图像序列关键帧确定方法，其特征在于，所述根据所述图像匹配块通过集成描述器确定图像块的位置分布相似度及纹理相似度，并根据所述图像块的位置分布相似度及纹理相似度确定所述参考图像和所述目标图像之间的图像相似度的步骤，包括：

基于预设联合概率公式和所述图像匹配块计算所述参考图像和所述目标图像之间的联合概率；

根据所述联合概率和集成描述器确定图像块的位置分布相似度及纹理相似度，并根据所述图像块的位置分布相似度及纹理相似度确定所述参考图像和所述目标图像之间的图像相似度。

5.如权利要求4所述的胶囊内镜图像序列关键帧确定方法，其特征在于，所述根据所述联合概率和集成描述器确定图像块的位置分布相似度及纹理相似度，并根据所述图像块的位置分布相似度及纹理相似度确定所述参考图像和所述目标图像之间的图像相似度的步骤，包括：

若所述参考图像的各图像块特征描述器向量和所述目标图像的各图像块特征描述器向量之间相互独立，通过集成描述器和所述联合概率计算图像匹配块对应的特征描述器向量之间相似度；

若所述参考图像中各图像块位置和所述目标图像中各图像块位置相互独立，通过集成描述器和所述联合概率计算图像匹配块的位置相似度；

根据所述特征描述器向量之间的相似度、所述位置相似度及和预设相似度阈值确定所述参考图像和所述目标图像之间的图像相似度。

6.如权利要求1-5任一项的所述胶囊内镜图像序列关键帧确定方法，其特征在于，所述对胶囊内镜图像序列中的图像进行遍历，并获取遍历到的当前图像和所述当前图像的下一帧图像的步骤之前，还包括：

对历史胶囊内镜图像序列中的每帧图像进行圆形镜像操作，获得镜像后的胶囊内镜图像序列；

对所述镜像后的胶囊内镜图像序列进行遍历，并将遍历到的相邻两幅相似图像作为一个训练样本对，并根据所述训练样本对生成样本集；

根据所述样本集训练初始SiameseCF网络模型，获得预设SiameseCF网络模型。