[发明专利]一种端子排图像检测信息匹配方法

权利要求书

1.一种端子排图像检测信息匹配方法，其特征在于，采用带权二分图的最优匹配Kuhn-Munkres算法进行迭代求解，进行匹配效果，利用空间关系进行损失矩阵的求解，并且逻辑上判断“M×N”关系进行矩阵加权，最后进行二分匹配求解端子号与端子线管文字信息的指派匹配求解，根据端子排OCR检测、识别结果，进行数据关联，并通过与CAD数据库信息进行关联，最终可形成表格化处理结果。

2.根据权利要求1所述的一种端子排图像检测信息匹配方法，其特征在于，

具体表现为：利用OCR识别检测端子排结果，通过二分图数据关联匹配算法，形成最后的OCR图像数据匹配结果，进而生成由图像到端子信息的表格化转化；CAD图纸端，通过端子排行业标准规范，建立对应图的图纸数据库，并赋予基于带属性的各端子信息，形成端子信息关联；最后，将OCR检测数据与CAD数据库结果对比，进而实现完整的端子排信息核检回路闭环，辅助巡检工作人员核检、比对应用。

3.根据权利要求1所述的一种端子排图像检测信息匹配方法，其特征在于，利用空间关系进行损失矩阵的求解，所述空间关系指端子排端子号文本图像位置坐标和线管文本图像位置坐标之间的欧氏距离，进而形成损失矩阵。

4.根据权利要求1所述的一种端子排图像检测信息匹配方法，其特征在于，所述M×N中的M指数量端子排线号文本的数量，N指端子排线管文本的数量；逻辑关系指M和N的大小。

5.根据权利要求1所述的一种端子排图像检测信息匹配方法，其特征在于，指派匹配求解的具体求解过程包括以下步骤：

1)先对端子排的所有文本检测、识别得到端子排文本内容以及相应的图像位置坐标信息；

2)然后再根据文本内容判断识别到的文本是否属于数字；进而将端子排线号和端子排线管的图像位置信息分成两组序列；

3)根据2)判断两组序列的大小求解端子排端子号文本图像位置坐标和线管文本图像位置坐标之间的欧氏距离，形成损失矩阵；

4)依据损失矩阵再根据Kuhn-Munkres算法，进行匹配求解自此，根据最优的行索引对应的列索引，得到端子排序号和端子排线管的匹配对。

6.根据权利要求5所述的一种端子排图像检测信息匹配方法，其特征在于，步骤2)中所述数字包括0,1,2，3,4,5,6,7,8，9。

7.根据权利要求5所述的一种端子排图像检测信息匹配方法，其特征在于，步骤3)中判断M和N的大小，若M小于等于N，则端子排线号文本作为损失矩阵的行索引，线管文本作为损失矩阵的列索引，同理反之。

8.根据权利要求1所述的一种端子排图像检测信息匹配方法，其特征在于，在信息匹配之前还有端子排图像标注处理步骤和端子排图像检测识别步骤。

9.根据权利要求1所述的一种端子排图像检测信息匹配方法，其特征在于，端子排图像标注处理步骤包括：角度为非水平位的端子排采用四点式标注，标注边框紧贴文字数字的周边，不留有空隙；同一线管上的文字标注为一个整体，文字或数字间若带有空格，不分开标注，将空格标注出来，在标注过程中，如果中间存在若干空格只标注一个空格。

10.根据权利要求1所述的一种端子排图像检测信息匹配方法，其特征在于，端子排图像检测识别步骤包括：采取两阶段OCR字符识别，一阶段采用可微的二值化DBNet网络结构作为文本检测，不同的是在模型backbone的不同阶段添加了BAM模块，用于增强模型的增强表达，达到在文本结构信息缺失的情况下，仍然能得到有效的对文本目标分割边界定位的目的；二阶段采用CNN+RNN+CTC方法实现文本识别。