[发明专利]序列标注方法、装置、计算机设备和存储介质有效
| 申请号: | 201910740751.X | 申请日: | 2019-08-12 |
| 公开(公告)号: | CN110688853B | 公开(公告)日: | 2022-09-30 |
| 发明(设计)人: | 孙超;于凤英;王健宗;韩茂琨 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
| 主分类号: | G06F40/295 | 分类号: | G06F40/295;G06F40/258 |
| 代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 黄丽霞 |
| 地址: | 518033 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 序列 标注 方法 装置 计算机 设备 存储 介质 | ||
本申请涉及一种基于神经网络的序列标注方法、装置、计算机设备和存储介质。所述方法包括:将待标注序列中的各字符进行向量转换得到对应的特征词向量;将特征词向量输入预设的序列标注神经网络,以对待标注序列分词,得到候选词语以及候选词语对应的词语标签;将词语标签分别与候选词语中各字符的位置进行组合,得到字符在候选词语中的所属字符标签。基于候选词语中各字符的所属字符标签的权重向量,测算候选词语的第一配对指标。基于每组候选词语对应的第一配对指标,测算候选标注序列的第二配对指标。将数值最大的第二配对指标对应的候选标注序列识别为第一标注序列。采用本方法能够提高标注的准确性。
技术领域
本申请涉及计算机技术领域,特别是涉及一种序列标注方法、装置、计算机设备和存储介质。
背景技术
序列标注是自然语言处理的一类基本任务,即对输入的文本进行划分,从而输出与文本对应的序列串。序列标注一般广泛应用于词性标注、命名体识别等场景。传统对序列进行标注,通常使用半马尔科夫条件随机场(semi-Markov conditional random fields,简称SCRFs)来解决。然而,SCRFs利用的是自然语言中的短语而不是单个词来进行特征提取,导致在单个词较多的情况下标注的准确率低。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高准确率的序列标注方法、装置、计算机设备和存储介质。
一种序列标注方法,所述方法包括:
当接收携带有待标注序列的序列标注请求时,将所述待标注序列中的各字符进行向量转换,得到字符对应的特征词向量;
将所述特征词向量输入预设的序列标注神经网络,以对所述待标注序列进行分词,得到候选词语以及所述候选词语对应的词语标签;
将所述词语标签分别与所述候选词语中各字符的位置进行组合,得到所述字符在所述候选词语中的所属字符标签;
基于所述候选词语中各字符的所述所属字符标签的权重向量,测算所述候选词语的第一配对指标;所述权重向量由训练所述序列标注神经网络时所得;
基于每组所述候选词语对应的所述第一配对指标,测算候选标注序列的第二配对指标;所述候选标注序列是将至少两组所述候选词语进行排列组合得到;
将数值最大的所述第二配对指标对应的候选标注序列识别为第一标注序列。
在其中一个实施例中,所述将所述待标注序列中的各字符进行向量转换,得到字符对应的特征词向量,包括:
从预设的词向量表中获取所述待标注序列中各字符对应的词向量表示;
利用神经网络将各所述字符对应的词向量表示进行转换,得到对应的特征词向量。
在其中一个实施例中,所述基于所述候选词语中各字符的所述所属字符标签的权重向量,测算所述候选词语的第一配对指标,包括:
确定组成所述候选词语的字符,获取组成所述候选词语的字符对应的特征向量;
获取组成所述候选词语的字符对应的所属字符标签的权重向量;
根据各字符的所述特征向量与所述权重向量,测算得到所述候选词语的第一配对指标。
在其中一个实施例中,所述基于每组所述候选词语对应的所述第一配对指标,测算候选标注序列的第二配对指标,包括:
确定组成所述候选标注序列的候选词语;
获取所述候选词语对应的转移参数;
基于所述候选词语对应的所述第一配对指标和转移参数,测算得到所述候选标注序列的第二配对指标。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910740751.X/2.html,转载请声明来源钻瓜专利网。





