[发明专利]一种基于手写文字识别的物流标签信息检测方法及系统

摘要

本发明公开了一种基于手写文字识别的物流标签信息检测方法及系统，该方法包括：捕捉并提取出标签面单上包含手写汉字信息区域的标签图像；裁剪，去除标签信息区域图像边缘背景；校正倾角；预处理；构建二次判别函数分类器MQDF和深度置信网络DBN的融合模型；利用融合模型对汉字字符逐一进行分类识别，获取每个汉字分类信息，并将分类好的汉字进行合并，获取连续文字表达信息；按每个单独信息区域划分将对应信息导入到标签信息管理系统中。该系统包括：依次连接的限定图像区域采集模块、标签信息区域检测模块、标签信息区域提取与处理模块、手写汉字预处理与特征提取模块以及手写汉字信息识别模块。本发明缩短了提取时间，提高了分拣效率。

主权项

1.一种基于手写文字识别的物流标签信息检测方法，其特征在于，包括：S11：当贴有普通手写标签面单的快递随传送带经过限定图像采集区域时，捕捉并提取出标签面单上包含手写汉字信息区域的标签图像；S12：对提取到的标签图像进行裁剪，去除标签信息区域图像边缘背景；所述S12具体包括：S121：测量出模板标签图像信息区域最外侧矩形四个顶点位置坐标，同时按各信息区域的划分测量出每个内侧矩形顶点位置点坐标；S122：利用特征检测算法将视频流中待检测标签与模板标签的特征点进行检测匹配，求出两幅图像之间的仿射变换矩阵；S123：根据得到的仿射变换矩阵的逆矩阵求出模板标签上外侧矩形区域四个顶点位置坐标在待检测标签上对应的四个顶点坐标，得到具有一定倾斜角度的矩形待检测区域，对其进行剪裁；S13：根据已求出的四个顶点坐标计算待检测标签的倾角及中心位置坐标，并以中心位置为中心转动倾角以校正倾角；S14：对倾角校正后的待检测标签的标签信息区域图像做二值化与平滑处理，并利用得到的仿射变换矩阵H求出标签内侧矩形各顶点位置，按顶点位置进行剪裁获得每个分块标签，然后利用基于投影的切分算法提取出每个分块标签上的汉字字符，对汉字字符进行规整化处理，提取其特征，并对特征进行降维处理；S15：构建修改的二次判别函数分类器MQDF和深度置信网络DBN的融合模型，融合模型的工作过程包括：训练、识别以及融合；所述S15具体包括：S151：训练阶段，利用手写汉字数据库中的汉字对MQDF和DBN同时训练，其中MQDF提取汉字梯度特征，DBN提取汉字层次特征；S152：识别阶段，对于MQDF设置预设阈值T作为其分类识别可信度Rc的阈值并规定MQDF输出结果判定规则，对于DBN则直接进行分类输出；S153：融合阶段，将两个分类器的识别部分调整到同一个可比较域中；S16：利用融合模型对汉字字符逐一进行分类识别，获取每个汉字分类信息，并将分类好的汉字进行合并，获取连续文字表达信息；S17：按每个单独信息区域划分将对应信息导入到标签信息管理系统中。