[发明专利]复杂地址分词方法和装置、计算机可读存储介质在审
| 申请号: | 202010692414.0 | 申请日: | 2020-07-17 |
| 公开(公告)号: | CN114004224A | 公开(公告)日: | 2022-02-01 |
| 发明(设计)人: | 程炎敏;白亮;杨哲超 | 申请(专利权)人: | 中国电信股份有限公司 |
| 主分类号: | G06F40/289 | 分类号: | G06F40/289;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 中国贸促会专利商标事务所有限公司 11038 | 代理人: | 王云飞 |
| 地址: | 100033 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 复杂 地址 分词 方法 装置 计算机 可读 存储 介质 | ||
1.一种复杂地址分词方法,其特征在于,包括:
对训练样本标注数据集进行预训练,得到地址切分模型;
进行当前地址切分模型应用,确定当前地址切分模型的切分精度;
判断当前地址切分模型的切分精度是否大于预定阈值;
在当前地址切分模型的切分精度大于预定阈值的情况下,根据标准地址库里的标准地址或专家判断对模型切分结果进行纠正,得到训练样本增量标注数据集;
基于训练样本增量标注数据集,采用增量学习方式,学习新增样本数据的规律,进行模型重构,得到新的地址切分模型;
将新的地址切分模型作为当前地址切分模型,之后执行进行当前地址切分模型应用,确定当前地址切分模型的切分精度的步骤。
2.根据权利要求1所述的复杂地址分词方法,其特征在于,还包括:
获取待分词的行业地址数据集和相应的标准地址库集合;
根据实际业务需要,随机从待分词的行业地址数据集中选择部分数据,进行人工标注,得到训练样本标注数据集。
3.根据权利要求1或2所述的复杂地址分词方法,其特征在于,所述进行当前地址切分模型应用,确定当前地址切分模型的切分精度包括:
将当前地址切分模型进行工程化封装;
采用当前地址切分模型批量对待分词地址数据集中的地址数据进行切分,输出模型切分结果,其中,模型切分结果为模型切分后的地址要素集合;
根据模型切分结果确定当前地址切分模型的切分精度。
4.根据权利要求3所述的复杂地址分词方法,其特征在于,所述根据模型切分结果确定当前地址切分模型的切分精度包括:
将当前地址切分模型切分后的地址要素集合与标准地址库里的标准地址进行批量比对,确定当前地址切分模型的切分精度。
5.根据权利要求1或2所述的复杂地址分词方法,其特征在于,还包括:
在当前地址切分模型的切分精度不大于预定阈值的情况下,输出当前地址切分模型。
6.根据权利要求1或2所述的复杂地址分词方法,其特征在于,所述对训练样本标注数据集进行预训练,得到地址切分模型包括:
对训练样本标注数据集进行向量化处理;
采用深度学习算法进行模型预训练,并进行参数调优后,得到训练好的地址切分模型。
7.一种复杂地址分词装置,其特征在于,包括:
模型预训练单元,用于对训练样本标注数据集进行预训练,得到地址切分模型;
模型应用单元,用于进行当前地址切分模型应用,确定当前地址切分模型的切分精度;
模型判定单元,用于判断当前地址切分模型的切分精度是否大于预定阈值;
数据核验和增量单元,用于在当前地址切分模型的切分精度大于预定阈值的情况下,根据标准地址库里的标准地址或专家判断对模型切分结果进行纠正,得到训练样本增量标注数据集;
模型重构单元,用于基于训练样本增量标注数据集,采用增量学习方式,学习新增样本数据的规律,进行模型重构,得到新的地址切分模型;
循环迭代单元,用于将新的地址切分模型作为当前地址切分模型,之后执行进行当前地址切分模型应用,确定当前地址切分模型的切分精度的操作。
8.根据权利要求7所述的复杂地址分词装置,其特征在于,所述复杂地址分词装置用于执行实现如权利要求2-6中任一项所述的复杂地址分词方法的操作。
9.一种复杂地址分词装置,其特征在于,包括:
存储器,用于存储指令;
处理器,用于执行所述指令,使得所述装置执行实现如权利要求1-6中任一项所述的复杂地址分词方法的操作。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述指令被处理器执行时实现如权利要求1-6中任一项所述的复杂地址分词方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国电信股份有限公司,未经中国电信股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010692414.0/1.html,转载请声明来源钻瓜专利网。





