[发明专利]命名实体识别方法、装置、终端及可读介质有效

专利信息
申请号: 201911309705.0 申请日: 2019-12-18
公开(公告)号: CN111062216B 公开(公告)日: 2021-11-23
发明(设计)人: 薛天竹 申请(专利权)人: 腾讯科技(深圳)有限公司
主分类号: G06F40/295 分类号: G06F40/295;G06F16/33;G06F16/35
代理公司: 广州三环专利商标代理有限公司 44202 代理人: 熊永强;杜维
地址: 518057 广东省深圳*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 命名 实体 识别 方法 装置 终端 可读 介质
【说明书】:

发明实施例提供了一种命名实体识别方法、装置、终端及可读存储介质,其中,所述方法包括:获取语料信息,所述语料信息包括m个语料词汇,m为正整数;调用命名实体识别模型对所述语料信息中的m个语料词汇进行实体预测,得到预测结果;其中,所述预测结果用于指示所述语料信息中的m个语料词汇是否为预测的命名实体,所述命名实体识别模型为根据标注语料信息训练得到,所述标注语料信息为对样本语料信息进行命名实体标注后得到的信息。通过实施本发明,可以减少命名实体识别对人工的依赖,节约人力成本和增加工作效率,并提升命名实体识别准确率。

技术

本发明涉及人工智能技术,尤其涉及一种命名实体识别方法、装置、终端及可读存储介质。

背景技术

命名实体,是指某领域内的具有特定意义或者代表性强的实体词,如新闻领域的事件名、地点名、人物名等,又如游戏领域的游戏人物名、装备名、技能名等。目前,主要是将命名实体识别转化为机器学习中的一个有监督学习的问题进行处理,通过建立统计学习模型或者深度学习模型并进行模型的训练,最后得到命名实体识别结果。目前,有监督学习的模型训练依赖大规模的标注语料,通常标注语料是由人为主动标注获得的。这样会导致模型训练的精度不高。相应地,使用该模型进行实体识别时,会降低实体识别的准确度。

发明内容

本发明实施例提供了一种命名实体识别方法、装置、终端及可读存储介质,可以减少命名实体识别对人工的依赖,节约人力成本和增加工作效率,并提升命名实体识别准确率。

第一方面,本发明实施例提供了一种命名实体识别方法、装置、设备及可读存储介质,该命名实体识别方法包括:获取语料信息,该语料信息包括m个语料词汇,m为正整数;调用命名实体识别模型对语料信息中的m个语料词汇进行实体预测,得到预测结果;其中,预测结果用于指示语料信息中的m个语料词汇是否为预测的命名实体,该命名实体识别模型为根据标注语料信息训练得到,该标注语料信息为对样本语料信息进行命名实体标注后得到的信息。

在一种实现方式中,调用命名实体识别模型对语料信息中的m个语料词汇进行实体预测之前,还包括:获取样本语料信息,采用命名实体标注法对样本语料信息进行命名实体标注,得到标注语料信息,该标注语料信息用于表示样本语料信息中包括有n个命名实体,n为正整数;根据标注语料信息,对初始识别模型进行训练,得到命名实体识别模型。

在一种实现方式中,采用命名实体标注法对样本语料信息进行命名实体标注,得到标注语料信息包括:根据种子词典,采用强匹配算法对样本语料信息进行命名实体识别,得到样本语料信息中的n个命名实体;对样本语料信息中的n个命名实体进行实体标注,得到标注语料信息。

在一种实现方式中,还包括:根据种子词典和预测结果,对m个语料词汇进行实体再分类,得到分类结果,该分类结果用于指示m个语料词汇对应的预测结果是否与种子词典的分类结果相同;按照分类结果,对种子词典中的命名实体进行更新。

在一种实现方式中,分类结果包括目标语料词汇对应的预测结果指示目标语料词汇为预测的命名实体,而种子词典的分类结果指示目标语料词汇不为种子词典中的命名实体;按照该分类结果,对种子词典中的命名实体进行更新包括:将目标语料词汇添加到种子词典,作为种子词典中新增的命名实体,该目标语料词汇为m个语料词汇中的词汇。

在一种实现方式中,将目标语料词汇添加到种子词典之前,还包括:显示用户交互界面,该用户交互界面用于提示是否需要将目标语料词汇添加到种子词典;响应于针对用户交互界面的确认指令,执行将目标语料词汇添加到种子词典的步骤,该确认指令用于指示确定需要将目标语料词汇添加到种子词典。

在一种实现方式中,分类结果包括目标语料词汇对应的预测结果指示目标语料词汇不为预测的命名实体,而种子词典的分类结果指示目标语料词汇为种子词典中的命名实体;按照该分类结果,对种子词典中的命名实体进行更新包括:删除种子词典中的目标语料词汇,该目标语料词汇为m个语料词汇中的词汇。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201911309705.0/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top