[发明专利]文字检测方法及系统有效
申请号: | 202010008296.7 | 申请日: | 2020-01-03 |
公开(公告)号: | CN111242120B | 公开(公告)日: | 2022-07-29 |
发明(设计)人: | 张勇东;王裕鑫;谢洪涛 | 申请(专利权)人: | 中国科学技术大学;北京中科研究院 |
主分类号: | G06V20/62 | 分类号: | G06V20/62;G06V30/148;G06V30/19;G06V10/82;G06K9/62;G06N3/04 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 任岩 |
地址: | 230026 安*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文字 检测 方法 系统 | ||
1.一种文字检测方法,包括:
对输入图像进行特征提取,得到特征图像;
利用自适应区域建议网络进行预测,得到建议框,具体包括:利用所述自适应区域建议网络对预置锚框的点进行局部偏置预测,得到相应的预测点;根据所述预测点确定所述建议框;
利用所述建议框对所述特征图像进行裁剪,得到裁剪特征图;
在两个正交方向上分别对所述裁剪特征图进行文字纹理信息建模,得到每一所述正交方向对应的轮廓点热力图,其中,所述两个正交方向为水平方向和垂直方向,所述在两个正交方向上分别对所述裁剪特征图进行文字纹理信息建模,包括:根据第一卷积核,建立所述裁剪特征图在所述水平方向上的第一文字纹理信息模型;根据第二卷积核,建立所述裁剪特征图在所述垂直方向上的第二文字纹理信息模型;
利用非极大值抑制法滤除所述轮廓点热力图中的背景像素点,再筛选出在所述两个正交方向对应的轮廓点热力图中的响应值均大于预设阈值的像素点,得到廓点集合,以重建所述输入图像中的文字。
2.根据权利要求1所述的方法,其中,所述第一卷积核的尺寸为1×k,所述第二卷积核的尺寸为k×1,k不大于所述裁剪特征图的尺寸。
3.根据权利要求1所述的方法,其中,所述方法还包括:
根据所述裁剪特征图,利用微调网络对所述建议框进行调整,得到调整后的建议框;
利用调整后的建议框对所述特征图像进行裁剪,得到调整后的裁剪特征图;
对调整后的裁剪特征图进行上采样,得到上采样特征图。
4.根据权利要求3所述的方法,其中,所述在两个正交方向上分别对所述裁剪特征图进行文字纹理信息建模,包括:
在两个正交方向上分别对所述上采样特征图进行文字纹理信息建模。
5.根据权利要求3所述的方法,其中,所述在两个正交方向上分别对所述裁剪特征图进行文字纹理信息建模,包括:
分别利用所述两个正交方向上的文字纹理信息感知网络对所述裁剪特征图进行文字纹理信息建模;
在对输入图像进行特征提取之前,所述方法还包括:
利用随机梯度下降法,根据损失函数对所述自适应区域建议网络、文字纹理信息感知网络、微调网络进行训练,所述损失函数为:
L=LArpn+λHcpLHcp+λVcpLVcp+λboxclassLboxclass+λboxregLboxreg
其中,L为所述损失函数,LArpn为所述自适应区域建议网络的损失函数,LHcp为一正交方向上的文字纹理信息感知网络的损失函数,LVcp为另一正交方向上的文字纹理信息感知网络的损失函数,Lboxclass、Lboxreg为所述微调网络的损失函数,λHcp为所述一正交方向上的文字纹理信息感知网络的平衡参数,λVcp为所述另一正交方向上的文字纹理信息感知网络的平衡参数,λboxclass、λboxreg为所述微调网络的平衡参数。
6.一种文字检测系统,包括:
提取模块,用于对输入图像进行特征提取,得到特征图像;
预测模块,用于利用自适应区域建议网络进行预测,得到建议框,具体包括:利用所述自适应区域建议网络对预置锚框的点进行局部偏置预测,得到相应的预测点;根据所述预测点确定所述建议框;
裁剪模块,用于利用所述建议框对所述特征图像进行裁剪,得到裁剪特征图;
建模模块,用于在两个正交方向上分别对所述裁剪特征图进行文字纹理信息建模,得到每一所述正交方向对应的轮廓点热力图,其中,所述两个正交方向为水平方向和垂直方向,所述在两个正交方向上分别对所述裁剪特征图进行文字纹理信息建模,包括:根据第一卷积核,建立所述裁剪特征图在所述水平方向上的第一文字纹理信息模型;根据第二卷积核,建立所述裁剪特征图在所述垂直方向上的第二文字纹理信息模型;
筛选模块,用于利用非极大值抑制法滤除所述轮廓点热力图中的背景像素点,再筛选出在所述两个正交方向对应的轮廓点热力图中的响应值均大于预设阈值的像素点,得到轮廓点集合,以重建所述输入图像中的文字。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学技术大学;北京中科研究院,未经中国科学技术大学;北京中科研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010008296.7/1.html,转载请声明来源钻瓜专利网。