[发明专利]证照信息识别方法、装置、设备及介质

说明书

本发明公开了一种证照信息识别方法、装置、设备及介质，该方法通过获取待识别的证照图像对应的模板图像，根据模板图像中的锚点字段与证照图像中的文字内容的匹配结果，计算模板图像与证照图像之间的单应性变换矩阵，进而根据单应性变换矩阵在证照图像中确定与模板图像的待识别区域所对应的字段内容，通过该字段内容以及模板图像中的键值对关系，确定证照图像的键值对输出结果，实现了证照图像中的键值对信息的自动提取，进而实现了证照中结构化信息的自动获取，解决了现有技术无法获取证照的结构化信息的技术问题。

技术领域

本发明涉及光学字符识别技术领域，尤其涉及一种证照信息识别方法、装置、设备及介质。

背景技术

光学字符识别技术(Optical Character Recognition，OCR)，是指将图像中的文字进行定位与识别，翻译成计算机文字，以供后续文字处理模块进一步编辑加工。

一般的OCR给出往往是按行识别的结果，但是在许多应用场景中，仅提取出图片中的文字信息是不足以满足业务需求的，尤其实在证照、票据类的识别应用中，用户更需要带有字段定义的结构化表示，即key-value形式的结构化数据。因此，现有技术存在无法获取证照中的结构化信息的技术缺陷。

发明内容

本发明提供了一种证照信息识别方法、装置、设备及介质，以获取证照图像中的键值对信息，解决现有技术无法获取证照图像中的结构化信息的技术问题。

根据本发明的一方面，提供了一种证照信息识别方法，该方法包括：

确定待识别的证照图像，获取所述证照图像对应的模板图像，其中，所述模板图像包括锚点字段、待识别区域以及所述待识别区域对应的键值对关系；

基于所述锚点字段与所述证照图像中的文字内容的匹配结果，计算所述证照图像与所述模板图像之间的单应性变换矩阵；

基于所述单应性变换矩阵，确定在所述证照图像中所述待识别区域对应的字段内容；

基于所述字段内容以及所述键值对关系，确定所述证照图像的键值对输出结果。

可选的，所述方法还包括：

基于预先训练的目标检测模型对所述证照图像进行切割，以使切割后的所述证照图像仅包括证照区域；

基于预先训练的文字提取模型，获取所述证照图像中的文字内容。

可选的，在所述基于预先训练的目标检测模型对所述证照图像进行切割之前，所述方法还包括：

基于所述目标检测模型确定所述证照区域在所述证照图像中的比例；

若所述证照区域在所述证照图像中的比例满足预设阈值，则执行基于所述目标检测模型对所述证照图像进行切割的操作。

可选的，在所述基于预先训练的目标检测模型对所述证照图像进行切割之后，所述方法还包括：

基于预先训练的文字检测模型，确定所述证照图像中的各个文字区域；

基于预先训练的文字角度分类模型，确定各所述文字区域对应的方向，基于各所述文字区域对应的方向确定所述证照图像对应的方向；

若所述证照图像对应的方向不满足预设朝向条件，则对所述证照图像进行旋转处理。

可选的，所述获取所述证照图像对应的模板图像，包括：

基于所述目标检测模型确定所述证照图像对应的证照类型；

获取所述证照类型对应的模板图像，将所述证照类型对应的模板图像作为所述证照图像对应的模板图像。