[发明专利]一种电网设备热缺陷识别方法及装置

说明书

本发明提供了一种电网设备热缺陷识别方法及装置，其中，电网设备热缺陷识别方法包括：获取待识别电网设备的可见光和红外光图像特征；对可见光图像特征和红外光图像特征进行跨模态特征信息交互，得到合成模态共享特征；分别提取可见光模态的第一互补特征和红外光模态的第二互补特征；利用第一互补特征、第二互补特征分别对可见光图像特征和红外光图像特征进行增强，得到增强后的可见光图像特征和红外光图像特征；对增强后的可见光图像特征和红外光图像特征进行跨模态特征融合，得到融合特征；将融合特征输入预设电网设备热缺陷识别模型，得到待识别电网设备的热缺陷识别结果。充分利用融合特征识别电网设备热缺陷，大幅提高电网设备的检修效率。

技术领域

本发明涉及电网缺陷识别领域，具体涉及一种电网设备热缺陷识别方法及装置。

背景技术

随着用电用户对用电质量的要求越来越高，供电公司在保障正常供电情况下，需要频繁定期巡检大量的电网设备，然而由于电网设备分布范围广，巡检跨度大，巡检难度高，极大的限制了巡检的准确性和效率。近年来，由于可见光图像可以提供具有高分辨率和清晰度的纹理细节，而红外图像则可以根据辐射差异将目标与背景区分开来，因此，学界和工业界涌现出了大量基于可见光和红外图像两种模态的电网设备热缺陷识别方法，主流的方法大致可以分为两类：图像融合和特征融合，其中，对于图像融合，现有方法通过人工设计的规则将两种模态的图像进行直接融合，限制了图像特征的学习能力；而对于特征融合，现有方法在特征层面直接将两种模态的特征进行简单融合，缺乏了模态之间特征信息的交互，导致对电网热缺陷识别的效果较差，无法有效提升电网设备的检修效率。

发明内容

因此，本发明要解决的技术问题在于克服现有技术中的没有将可见光和红外图像两种模态进行特征信息交互，导致对电网热缺陷识别的效果较差，无法有效提升电网设备的检修效率的缺陷，从而提供一种电网设备热缺陷识别方法及装置。

根据第一方面，本发明实施例提供了一种电网设备热缺陷识别方法，所述方法包括：

获取待识别电网设备对应的图像特征，所述图像特征包括可见光图像特征和红外光图像特征；

对所述可见光图像特征和红外光图像特征进行跨模态特征信息交互，得到合成模态共享特征；

从所述合成模态共享特征中分别提取可见光模态的第一互补特征和红外光模态的第二互补特征；

利用第一互补特征对所述可见光图像特征进行增强，得到增强后的可见光图像特征，并利用第二互补特征对所述红外光图像特征进行增强，得到增强后的红外光图像特征；

对所述增强后的可见光图像特征和所述增强后的红外光图像特征进行跨模态特征融合，得到融合特征；

将所述融合特征输入预设电网设备热缺陷识别模型，得到所述待识别电网设备的热缺陷识别结果。

可选地，所述对所述可见光图像特征和红外光图像特征进行跨模态特征信息交互，得到合成模态共享特征，包括：

分别对所述可见光图像特征和红外光图像特征进行上下文特征提取，得到第一图像特征和第二图像特征；

分别对所述第一图像特征和所述第二图像特征进行降维处理，得到第三图像特征和第四图像特征；

分别对所述第三图像特征和所述第四图像特征进行特征过滤，提取所述第三图像特征对应的第一共享特征和和所述第四图像特征对应的第二共享特征；

将所述第一共享特征和所述第二共享特征进行逐元素相加操作，得到合成模态共享特征。

可选地，所述从所述合成模态共享特征中分别提取可见光模态的第一互补特征和红外光模态的第二互补特征，包括：

分别对所述可见光图像特征、所述合成模态共享特征和所述红外光图像特征进行上下文特征提取，得到第五图像特征、第六图像特征和第七图像特征；