[发明专利]一种模型训练和信息推荐的方法及装置在审

专利信息
申请号: 202210410169.9 申请日: 2022-04-19
公开(公告)号: CN115017905A 公开(公告)日: 2022-09-06
发明(设计)人: 李如寐;王礼文;王思睿;武威 申请(专利权)人: 北京三快在线科技有限公司
主分类号: G06F40/295 分类号: G06F40/295
代理公司: 北京曼威知识产权代理有限公司 11709 代理人: 邓超
地址: 100080 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 模型 训练 信息 推荐 方法 装置
【说明书】:

本说明书公开了一种模型训练和信息推荐的方法及装置,可以在训练识别模型时,获取样本文本以及样本文本的标注信息,将该样本文本以及该样本文本所属业务场景下存在的关键词类型输入到待训练的识别模型中,以使该识别模型在该关键词类型的约束下,输出针对该样本文本的识别结果,并以最小化该识别结果与该标注信息之间的偏差为优化目标,对该识别模型进行训练,将样本文本所属业务场景下存在的关键词类型输入到的识别模型中,作为该识别模型对该样本文本进行识别的约束,以使该识别模型在训练时不仅可以结合标注信息来进行自我学习,还可以依赖于输入该识别模型的关键词类型的约束,对该样本文本进行识别,从而能够提高该识别模型的准确性。

技术领域

本说明书涉及命名实体识别领域,尤其涉及一种模型训练的方法及装置。

背景技术

当前,在自然语言处理领域(Natural Language Processing,NLP)中,命名实体识别(Named Entity Recognition,NER)可以包括在语句中抽取出命名实体(Named Entity,NE)、确定出命名实体的类型等任务,命名实体可以理解为是语句中的特定词语。

在现有技术中,可以通过有监督训练的方式,对神经网络模型进行训练,从而通过神经网络模型进行命名实体识别,这种方式依赖于大量的训练样本对的训练,但是,存在某些业务场景并没有大量的训练样本,导致训练得到的模型可能无法准确地进行识别。

因此,如何在训练样本较少的业务场景中,提高命名实体识别的准确性,则是一个亟待解决的问题。

发明内容

本说明书提供一种模型训练和信息推荐的方法及装置,以部分的解决现有技术存在的上述问题。

本说明书采用下述技术方案:

本说明书提供了一种模型训练的方法,包括:

获取样本文本以及所述样本文本的标注信息,所述标注信息中至少包括所述样本文本中包含的关键词的实际类型;

将所述样本文本以及所述样本文本所属业务场景下存在的关键词类型输入到待训练的识别模型中,以使所述识别模型在所述关键词类型的约束下,输出针对所述样本文本的识别结果;

以最小化所述识别结果与所述标注信息之间的偏差为优化目标,对所述识别模型进行训练。

可选地,将所述样本文本以及所述样本文本所属业务场景下存在的关键词类型输入到待训练的识别模型中,以使所述识别模型在所述关键词类型的约束下,输出针对所述样本文本的识别结果,具体包括:

将预设的指令、所述关键词类型以及所述样本文本输入到所述识别模型中,以使所述识别模型在所述关键词类型的约束下,根据所述指令的类型,输出针对所述样本文本的识别结果。

可选地,将预设的指令、所述关键词类型以及所述样本文本输入到所述识别模型中,以使所述识别模型在所述关键词类型的约束下,根据所述指令的类型,输出针对所述样本文本的识别结果,具体包括:

将携带有所述样本文本中包含的关键词的第一指令、所述关键词类型以及所述样本文本输入到所述识别模型中输入到所述识别模型中,以使所述识别模型输出从所述样本文本中识别出的关键词的类型,作为识别结果,所述第一指令用于确定出所述样本文本中包含的关键词所属的类型。

可选地,将预设的指令、所述关键词类型以及所述样本文本输入到所述识别模型中,以使所述识别模型在所述关键词类型的约束下,根据所述指令的类型,输出针对所述样本文本的识别结果,具体包括:

将第二指令、所述关键词类型以及所述样本文本输入到所述识别模型中输入到所述识别模型中,以使所述识别模型输出从所述样本文本中识别出的关键词以及识别出的关键词的类型,作为识别结果,所述第二指令用于确定出所述样本文本中包含的关键词以及所述样本文本中包含的关键词所属的类型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司,未经北京三快在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202210410169.9/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top