[发明专利]模型训练方法、数据处理方法及其装置有效
申请号: | 202210321041.5 | 申请日: | 2022-03-30 |
公开(公告)号: | CN114417022B | 公开(公告)日: | 2022-06-28 |
发明(设计)人: | 王潇斌;黄申;刘楚;丁瑞雪;谢朋峻 | 申请(专利权)人: | 阿里巴巴(中国)有限公司 |
主分类号: | G06F16/387 | 分类号: | G06F16/387;G06F40/295 |
代理公司: | 北京同钧律师事务所 16037 | 代理人: | 李小波;许怀远 |
地址: | 310056 浙江省杭州市滨江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型 训练 方法 数据处理 及其 装置 | ||
1.一种模型训练方法,其特征在于,包括:
获取第一行政区划文本,所述第一行政区划文本按照行政区域的层级顺序表示实际的行政区划;
对所述第一行政区划文本进行更改,得到第二行政区划文本,所述第二行政区划文本和所述第一行政区划文本表示相同的行政区划;
根据所述第一行政区划文本和所述第二行政区划文本,训练地址识别模型,得到训练完成的地址识别模型,包括:将所述第二行政区划文本输入所述地址识别模型的编码器进行编码处理,得到第一特征向量;将所述第一特征向量输入所述地址识别模型的第一识别子模型进行识别处理,得到预测行政区划文本;确定所述预测行政区划文本和所述第一行政区划文本的第一损失值;根据所述第一损失值调整所述编码器的编码参数和所述第一识别子模型的模型参数;获取具有目标层级关系的两个行政区域名称,所述目标层级关系包括:上下级或同级;将所述两个行政区域名称输入所述编码器进行编码,得到第五特征向量;将所述第五特征向量输入所述地址识别模型的第三识别子模型,得到预测层级关系;根据所述预测层级关系和所述目标层级关系,调整所述编码器的编码参数和所述第三识别子模型的模型参数;
其中,所述根据所述第一行政区划文本和所述第二行政区划文本,训练地址识别模型,包括:
将两个不同的行政区划文本分别输入所述编码器进行编码,得到对应的第二特征向量和第三特征向量;
组合所述第二特征向量和所述第三特征向量,得到第四特征向量;
将所述第四特征向量输入所述地址识别模型的第二识别子模型,得到预测识别结果;
确定所述预测识别结果和标签数据的第二损失值,所述标签数据用于表示所述两个不同的行政区划文本是否表示相同的行政区划;
根据所述第二损失值调整所述编码器的编码参数和所述第二识别子模型的模型参数;
其中,所述两个不同的行政区划文本包括所述第一行政区划文本和所述第二行政区划文本;或,所述两个不同的行政区划文本包括两个不同的第二行政区划文本;或,所述两个不同的行政区划文本包括第三行政区划文本和所述第一行政区划文本;或,所述两个不同的行政区划文本包括所述第三行政区划文本和所述第二行政区划文本,其中,所述第三行政区划文本和所述第一行政区划文本表示不同的行政区划。
2.根据权利要求1所述的模型训练方法,其特征在于,所述根据所述第一行政区划文本和所述第二行政区划文本,训练地址识别模型,还包括:
确定所述第二特征向量和所述第三特征向量的第三损失值;
根据所述第三损失值调整所述编码器的编码参数。
3.根据权利要求1或2所述的模型训练方法,其特征在于,所述第一行政区划文本包括:多个行政区域名称,所述多个行政区域名称按照层级递减的形式表示实际的行政区划,所述对所述第一行政区划文本进行更改,得到第二行政区划文本,包括以下至少一项:
对所述多个行政区域名称进行调序,得到所述第二行政区划文本;
采用形近字或者同音字替换所述第一行政区划文本中的至少一个文字,得到所述第二行政区划文本;
删除所述第一行政区划文本中的至少一个行政区域名称,得到所述第二行政区划文本;
采用目标名称替换对应的所述行政区域名称,得到所述第二行政区划文本,所述目标名称表示对应的所述行政区域名称的别名。
4.一种数据处理方法,其特征在于,包括:
获取第一行政区划文本;
将所述第一行政区划文本输入地址识别模型进行数据处理,得到所述第一行政区划文本对应的实际行政区划文本,所述地址识别模型是根据权利要求1至3任一项模型训练方法训练得到的。
5.根据权利要求4所述的数据处理方法,其特征在于,包括:
获取第二行政区划文本;
将所述第一行政区划文本和所述第二行政区划文本输入所述地址识别模型进行数据处理,得到所述第一行政区划文本和所述第二行政区划文本是否表示相同的行政区划的识别结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴(中国)有限公司,未经阿里巴巴(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210321041.5/1.html,转载请声明来源钻瓜专利网。