[发明专利]一种基于目标检测和文本识别的票据信息识别方法

权利要求书

1.一种基于目标检测和文本识别的票据信息识别方法，其特征在于，包括：

步骤A，票据图像收集及票据图像集准备；对某一固定票面的票据图像进行收集，剔除存在印刷信息严重错位及不可用的票据图像，作为票据图像集；然后对票据中的字段分别进行数据标注；将数据集按9:1的比例划分为训练集和测试集，并对训练集进行数据增强；

步骤B，文本目标检测；利用训练集的票据图像对OLOv4目标检测模型进行训练；将待检测的票据图像导入训练后的OLOv4目标检测模型进行文本的检测，检测到票据图像的文本目标字段，并将检测结果按数据标注的标签进行分类保存；

步骤C，文本目标裁剪；提取步骤B所检测到的文本目标字段的边框坐标信息，并以此对检测后的票据图像进行裁剪，得到检测出的不同字段的票据字段文本图像；

步骤D,文字目标识别；将步骤C所得到的票据字段文本图像导入文本识别网络CRNN进行文字识别，得到文本信息并将结果保存至步骤B的标签相对应的数据中；

步骤E，票据文本信息整理及输出；对文字识别后的文本信息进行整理，将整理后的文本信息与对应的标签格式化输出，完成对票据信息的提取识别。

2.根据权利要求1所述的票据信息识别方法，其特征在于，所述数据增强的方法，包括：步骤A100，利用传统数字图像处理方法，将划分后的训练集按照一定阈值进行随机缩放、平移、旋转和放射变换。

3.根据权利要求2所述的票据信息识别方法，其特征在于，所述数据增强的方法，还包括：步骤A200，利用随机擦除方法，对利用传统数字图像处理方法处理前的训练集票据图像随机擦除一个矩形区域。

4.根据权利要求1所述的票据信息识别方法，其特征在于，所述步骤E中，对文本信息进行整理的方法包括：对部分特定输出格式的文本使用正则匹配的方式进行约束输出；对非法格式输出进行修正。