[发明专利]名片识别方法和装置有效
申请号: | 201910360584.6 | 申请日: | 2019-04-30 |
公开(公告)号: | CN110135411B | 公开(公告)日: | 2021-09-10 |
发明(设计)人: | 欧中洪;熊柏桥;肖芬瑞;宋美娜;宋俊德 | 申请(专利权)人: | 北京邮电大学 |
主分类号: | G06K9/20 | 分类号: | G06K9/20;G06K9/34 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 张润 |
地址: | 100876 北京市海淀区西*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 名片 识别 方法 装置 | ||
1.一种名片识别方法,其特征在于,包括:
获取待识别的名片图像;
将所述名片图像输入至文字检测模型,以得到各文本行区域;其中,所述文字检测模型,已学习得到图像特征与各文本行区域之间的对应关系;
将所述各文本行区域输入至文字识别模型,以得到所述各文本行区域对应的名片信息;
其中,所述文字识别模型,通过以下步骤进行训练:
利用不同的字体、字形以及畸变的规则,生成样本图像,以及获取采集的样本图像;
对生成的样本图像和采集的样本图像中的文字进行标注;
利用标注后的样本图像,对初始的深度学习模型进行训练,得到所述文字识别模型;
其中,所述文字检测模型,通过以下步骤进行训练:
获取训练样本图像;
对所述训练样本图像中的文本行位置进行标注;
利用标注后的训练样本图像,对初始的深度学习模型进行训练,得到所述文字检测模型;
所述将所述名片图像输入至文字检测模型,以得到各文本行区域,包括:
通过所述文字检测模型,对所述名片图像进行特征提取;
生成提取的图像特征中不同位置对应的建议区域;
对所述建议区域进行候选框回归,得到候选文本行区域;
对所述候选文本行区域进行筛选,以剔除非文本行区域。
2.如权利要求1所述的方法,其特征在于,所述获取待识别的名片图像之后,所述方法还包括:
对所述名片图像进行预处理,其中,所述预处理包括名片区域的提取、去噪、倾斜校正、透视校正处理中的至少一项。
3.如权利要求1-2中任一所述的方法,其特征在于,所述方法还包括:
对所述名片信息进行校正后,识别校正后的名片信息所包含的信息类型;
获取所述校正后的名片信息中与所述信息类型对应的信息片段;
根据所述信息类型对所述信息片段进行分类存储。
4.一种名片识别装置,其特征在于,包括:
获取模块,用于获取待识别的名片图像;
文本行区域确定模块,用于将所述名片图像输入至文字检测模型,以得到各文本行区域;其中,所述文字检测模型,已学习得到图像特征与各文本行区域之间的对应关系;
名片信息确定模块,用于将所述各文本行区域输入至文字识别模型,以得到所述各文本行区域对应的名片信息;
其中,所述文字识别模型,通过以下模块进行训练:
生成模块,用于利用不同的字体、字形以及畸变的规则,生成样本图像,以及获取采集的样本图像;
标注模块,用于对生成的样本图像和采集的样本图像中的文字进行标注;
训练模块,用于利用标注后的样本图像,对初始的深度学习模型进行训练,得到所述文字识别模型;
其中,所述文字检测模型,通过以下步骤进行训练:
获取训练样本图像;
对所述训练样本图像中的文本行位置进行标注;
利用标注后的训练样本图像,对初始的深度学习模型进行训练,得到所述文字检测模型;
所述文本行区域确定模块中用于将所述名片图像输入至文字检测模型,以得到各文本行区域,包括:
通过所述文字检测模型,对所述名片图像进行特征提取;
生成提取的图像特征中不同位置对应的建议区域;
对所述建议区域进行候选框回归,得到候选文本行区域;
对所述候选文本行区域进行筛选,以剔除非文本行区域。
5.如权利要求4所述的装置,其特征在于,所述装置还包括:
预处理模块,用于对所述名片图像进行预处理,其中,所述预处理包括名片区域的提取、去噪、倾斜校正、透视校正处理中的至少一项。
6.如权利要求4-5中任一所述的装置,其特征在于,所述装置还包括:
识别模块,用于对所述名片信息进行校正后,识别校正后的名片信息所包含的信息类型;
所述获取模块,还用于获取所述校正后的名片信息中与所述信息类型对应的信息片段;
存储模块,用于根据所述信息类型对所述信息片段进行分类存储。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京邮电大学,未经北京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910360584.6/1.html,转载请声明来源钻瓜专利网。