[发明专利]命名实体识别模型训练方法、样本标注方法、装置及设备在审
| 申请号: | 202011481841.0 | 申请日: | 2020-12-14 |
| 公开(公告)号: | CN112487817A | 公开(公告)日: | 2021-03-12 |
| 发明(设计)人: | 张杰;于皓;邓礼志;吴信东 | 申请(专利权)人: | 北京明略软件系统有限公司 |
| 主分类号: | G06F40/295 | 分类号: | G06F40/295;G06F16/332;G06K9/62 |
| 代理公司: | 北京超成律师事务所 11646 | 代理人: | 裴素英 |
| 地址: | 100000 北京市海淀区*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 命名 实体 识别 模型 训练 方法 样本 标注 装置 设备 | ||
1.一种命名实体识别模型训练方法,其特征在于,所述方法包括:
接收终端设备发送的会话文本;
使用命名实体识别模型对所述会话文本进行命名实体识别处理,得到所述会话文本的命名实体识别结果,并将所述命名实体识别结果发送给所述终端设备;
若接收到所述终端设备发送的调整后识别结果,则将所述调整后识别结果以及所述会话文本作为新的样本更新至所述命名实体识别模型的训练集,得到更新后的训练集;
基于所述更新后的训练集对所述命名实体识别模型进行训练。
2.如权利要求1所述的方法,其特征在于,所述基于所述更新后的训练集对所述命名实体识别模型进行训练,包括:
确定所述更新后的训练集中各样本的样本权重;
基于所述各样本的样本权重,对所述命名实体识别模型进行训练。
3.如权利要求2所述的方法,其特征在于,所述确定所述更新后的训练集中各样本的样本权重,包括:
根据各样本的时间顺序,确定各样本的样本权重。
4.如权利要求2所述的方法,其特征在于,所述确定所述更新后的训练集中各样本的样本权重,包括:
根据各样本的样本类别,确定各样本的样本权重。
5.如权利要求1-4任一项所述的方法,其特征在于,所述基于所述更新后的训练集对所述命名实体识别模型进行训练,包括:
根据预设的更新策略判定是否对所述命名实体识别模型进行重新训练;
若是,则基于所述更新后的训练集对所述命名实体识别模型进行训练。
6.一种样本标注方法,其特征在于,所述方法包括:
获取会话文本,并将所述会话文本发送给服务器;
接收所述服务器发送的所述会话文本的命名实体识别结果;
使用预设的样式显示所述命名实体识别结果;
若接收到用户输入的针对所述命名实体识别结果的调整后识别结果,则将所述调整后识别结果发送给所述服务器。
7.如权利要求6所述的方法,其特征在于,所述预设的样式包括:下划线、预设的背景颜色。
8.一种命名实体识别模型训练装置,其特征在于,所述装置包括:文本接收模块、文本识别模块、调整识别模块、模型训练模块;
所述文本接收模块,用于接收终端设备发送的会话文本;
所述文本识别模块,用于使用命名实体识别模型对所述会话文本进行命名实体识别处理,得到所述会话文本的命名实体识别结果,并将所述命名实体识别结果发送给所述终端设备;
所述调整识别模块,用于若接收到所述终端设备发送的调整后识别结果,则将所述调整后识别结果以及所述会话文本作为新的样本更新至所述命名实体识别模型的训练集,得到更新后的训练集;
所述模型训练模块,用于基于所述更新后的训练集对所述命名实体识别模型进行训练。
9.一种样本标注装置,其特征在于,所述装置包括:文本发送模块、结果接收模块、结果显示模块、结果调整模块;
所述文本发送模块,用于获取会话文本,并将所述会话文本发送给服务器;
所述结果接收模块,用于接收所述服务器发送的所述会话文本的命名实体识别结果;
所述结果显示模块,用于使用预设的样式显示所述命名实体识别结果;
所述结果调整模块,用于若接收到用户输入的针对所述命名实体识别结果的调整后识别结果,则将所述调整后识别结果发送给所述服务器。
10.一种服务器,其特征在于,包括:第一存储器、第一处理器,所述第一存储器中存储有可在所述第一处理器上运行的计算机程序,所述第一处理器执行所述计算机程序时,实现上述权利要求1至5任一项所述的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明略软件系统有限公司,未经北京明略软件系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011481841.0/1.html,转载请声明来源钻瓜专利网。





