[发明专利]图像特征匹配方法和相关装置、设备及存储介质

权利要求书

1.一种图像特征匹配方法，其特征在于，包括：

获取至少两个待匹配图像；

分别对每个所述待匹配图像进行特征提取，得到每个所述待匹配图像的特征表示，其中，所述特征表示包括若干第一局部特征；

将所述第一局部特征变换为具有所述待匹配图像的全局感受野的第一变换特征；

对所述至少两个待匹配图像中的所述第一变换特征进行匹配，得到所述至少两个待匹配图像的第一匹配结果。

2.根据权利要求1所述的方法，其特征在于，所述特征表示包括第一特征图和第二特征图，所述第一特征图的分辨率小于所述第二特征图，所述第一特征图中的特征为所述第一局部特征，所述第二特征图的特征为第二局部特征；

在所述对所述至少两个待匹配图像中的所述第一变换特征进行匹配，得到所述至少两个待匹配图像的第一匹配结果之后，所述方法还包括：

基于所述第一匹配结果，从所述至少两个待匹配图像的第二特征图中提取匹配区块组，其中，所述匹配区块组包括至少两个特征区块，每个所述特征区块包括从一所述待匹配图像的第二特征图提取得到的多个第二局部特征；

对所述匹配区块组对应的第二变换特征进行匹配，得到所述至少两个待匹配图像的第二匹配结果，其中，所述第二变换特征为所述匹配区块组中的第二局部特征，或是对所述匹配区块组中的所述第二局部特征变换得到的。

3.根据权利要求2所述的方法，其特征在于，在所述对所述匹配区块组对应的第二变换特征进行匹配，得到所述至少两个待匹配图像的第二匹配结果之前，所述方法还包括：

将所述特征区块中的所述第二局部特征变换为具有所述特征区块的全局感受野的第二变换特征。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述将所述第一局部特征变换为具有所述待匹配图像的全局感受野的第一变换特征，或者，所述将所述特征区块中的所述第二局部特征变换为具有所述特征区块的全局感受野的第二变换特征，包括：

以所述第一局部特征作为第一目标特征，第一变换特征作为第二目标特征，每个所述待匹配图像为一目标范围；或者，以所述第二局部特征为第一目标特征，所述第二变换特征作为第二目标特征，每个所述特征区块为一目标范围；

基于对同一所述目标范围中所述第一目标特征的聚合处理和/或对不同所述目标范围中的第一目标特征的聚合处理，得到所述第二目标特征。

5.根据权利要求4所述的方法，其特征在于，所述基于对同一所述目标范围中所述第一目标特征的聚合处理和/或对不同所述目标范围中的第一目标特征的聚合处理，得到所述第二目标特征，包括：

分别以每个所述目标范围作为当前目标范围，并对所述当前目标范围执行以下至少一次特征变换：

将所述当前目标范围中的每个第一目标特征作为当前目标特征；

将所述当前目标范围中的当前目标特征与其他所述第一目标特征进行聚合，以得到与所述当前目标特征对应的第三目标特征；

将所述当前目标范围的第三目标特征与其他所述目标范围的第三目标特征进行聚合，以得到与所述当前目标特征对应的第四目标特征；

其中，在本次特征变换不为最后一次特征变换的情况下，将所述第四目标特征作为下次特征变换中的第一目标特征；在本次特征变换为最后一次特征变换的情况下，将所述第四目标特征作为所述第二目标特征。

6.根据权利要求5所述的方法，其特征在于，所述将所述当前目标范围中的当前目标特征与其他所述第一目标特征进行聚合的步骤由变换模型中的自注意力层执行；

所述将所述当前目标范围的第三目标特征与其他所述目标范围的第三目标特征进行聚合的步骤由所述变换模型中的交叉注意力层执行。

7.根据权利要求6所述的方法，其特征在于，所述自注意力层和/或交叉注意力层所使用的机制为线性注意力机制。