[发明专利]图像处理方法以及装置

权利要求书

1.一种图像处理方法，包括：

响应于针对目标图像中目标对象的初始交互指令，确定初始交互位置；

根据所述初始交互位置和所述目标图像，确定所述目标对象的初始掩膜图像、以及所述目标图像的初始图像特征；

根据所述初始交互位置、所述目标图像和所述初始掩膜图像，确定第一图像特征，对所述第一图像特征和所述初始图像特征进行融合处理，确定融合图像特征；

根据所述融合图像特征，确定与所述初始交互位置关联的模板特征；

对所述融合图像特征和所述模板特征进行自注意力处理，获得自注意力特征图；

对所述融合图像特征和所述模板特征进行像素处理，获得模板相似度特征图；

根据所述自注意力特征图和所述模板相似度特征图，确定所述目标对象的目标掩膜图像。

2.根据权利要求1所述的方法，所述根据所述融合图像特征，确定与所述初始交互位置关联的模板特征，包括：

在所述融合图像特征中，提取所述初始交互位置对应的位置像素特征；

根据所述位置像素特征和所述融合图像特征，确定与所述初始交互位置关联的模板特征。

3.根据权利要求2所述的方法，所述根据所述位置像素特征和所述融合图像特征，确定与所述初始交互位置关联的模板特征，包括：

确定所述位置像素特征和其他像素特征的相似度，将相似度达到预设相似度阈值的其他像素特征，确定为与所述初始交互位置关联的模板特征，

其中，所述其他像素特征为所述融合图像特征中、除所述位置像素特征之外的像素特征。

4.根据权利要求2所述的方法，所述根据所述位置像素特征和所述融合图像特征，确定与所述初始交互位置关联的模板特征，包括：

确定所述位置像素特征和其他像素特征的相似度，获得像素相似度特征图，其中，所述其他像素特征为所述融合图像特征中、除所述位置像素特征之外的像素特征；

根据所述位置像素特征和所述融合图像特征中其他像素特征的距离，确定像素距离图；

对所述像素相似度特征图和所述像素距离图进行融合处理，获得像素得分图；

将所述像素得分图中、像素得分达到预设得分阈值的像素特征，确定为与所述初始交互位置关联的模板特征。

5.根据权利要求1所述的方法，所述根据所述自注意力特征图和所述模板相似度特征图，确定所述目标对象的目标掩膜图像，包括：

对所述自注意力特征图和所述模板相似度特征图进行融合处理，将融合结果输入分类网络，获得所述分类网络输出的、所述目标对象的目标掩膜图像。

6.根据权利要求1所述的方法，所述根据所述初始交互位置、所述目标图像、所述初始掩膜图像，确定第一图像特征，对所述第一图像特征和所述初始图像特征进行融合处理，确定融合图像特征，包括：

对所述初始交互位置、所述目标图像和所述初始掩膜图像进行拼接处理，获得拼接图像，并对所述拼接图像进行卷积处理，获得第一图像特征；

对所述初始图像特征进行卷积处理，获得第二图像特征；

对所述第一图像特征和所述第二图像特征进行拼接处理，获得融合图像特征。

7.根据权利要求1所述的方法，所述确定所述目标对象的目标掩膜图像之后，还包括：

响应于针对所述目标对象的下一个交互指令，确定下一个交互位置；

利用所述下一个交互位置，对所述目标掩膜图像进行修正，获得修正后的目标掩膜图像；

继续执行所述响应于针对所述目标对象的下一个交互指令的步骤，直至接收针对所述目标对象的交互完成指令。

8.根据权利要求7所述的方法，所述利用所述下一个交互位置，对所述目标掩膜图像进行修正，获得修正后的目标掩膜图像，包括：

对所述下一个交互位置、所述初始交互位置、所述目标图像、所述目标掩膜图像和所述初始图像特征进行融合处理，确定修正融合图像特征；

对所述修正融合图像特征进行自注意力处理和像素处理，获得修正后的目标掩膜图像。