[发明专利]语义词典的构建方法、装置、存储介质和电子装置有效
| 申请号: | 201710952460.8 | 申请日: | 2017-10-13 |
| 公开(公告)号: | CN108304373B | 公开(公告)日: | 2021-07-09 |
| 发明(设计)人: | 鲁亚楠;林芬 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
| 主分类号: | G06F40/30 | 分类号: | G06F40/30;G06F40/247 |
| 代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 赵囡囡 |
| 地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 语义 词典 构建 方法 装置 存储 介质 电子 | ||
1.一种语义词典的构建方法,其特征在于,包括:
在多个词条中获取已标注等级的第一目标词条,并将具有对应关系的所述第一目标词条和第一等级数据添加至第一目标语义词典中,其中,所述第一等级数据用于指示所述第一目标词条的歧义程度的等级,所述第一目标语义词典用于识别词条在目标语料中的语义;
对所述第一目标语义词典中的所述第一目标词条和所述第一等级数据进行训练,得到目标分级模型,其中,所述目标分级模型用于对所述多个词条中的未标注等级的第二目标词条的歧义程度进行分级;
通过所述目标分级模型对所述多个词条中未标注等级的所述第二目标词条的歧义程度进行分级,得到第二等级数据,其中,所述第二目标词条为所述多个词条中除所述第一目标词条之外的词条,所述第二等级数据用于指示所述第二目标词条的歧义程度的等级;
将具有对应关系的所述第二目标词条和所述第二等级数据添加至所述第一目标语义词典中,得到第二目标语义词典,其中,添加有所述第一目标词条、所述第一等级数据、所述第二目标词条和所述第二等级数据的所述第二目标语义词典用于识别所述多个词条中的目标词条在所述目标语料中的语义和歧义程度。
2.根据权利要求1所述的方法,其特征在于,
在所述多个词条中获取已标注等级的所述第一目标词条之前,所述方法还包括:获取所述多个词条的第一语义特征,其中,所述第一语义特征包括用于指示所述词条的歧义程度的特征信息;获取所述多个词条的第二语义特征,其中,所述第二语义特征包括用于指示所述词条的重要程度的特征信息;由所述第一语义特征和所述第二语义特征构建第一目标特征集合;
在所述多个词条中获取已标注等级的所述第一目标词条包括:将所述第一目标特征集合中符合目标条件的特征信息确定为目标特征信息;将与所述目标特征信息对应的已标注等级的词条确定为所述第一目标词条。
3.根据权利要求2所述的方法,其特征在于,对所述第一目标语义词典中的所述第一目标词条和所述第一等级数据进行训练,得到所述目标分级模型包括:
将所述第一目标特征集合随机划分为第一特征集合和第二特征集合;
对所述第一目标语义词典中的所述第一目标词条、所述第一等级数据和所述第一特征集合通过分类器进行训练,得到第一分级模型,其中,所述目标分级模型包括所述第一分级模型,所述第一分级模型用于预测所述第二目标词条的置信度;
对所述第一目标语义词典中的所述第一目标词条、所述第一等级数据和所述第二特征集合通过分类器进行训练,得到第二分级模型,其中,所述目标分级模型包括所述第二分级模型,所述第二分级模型用于预测所述第二目标词条的置信度。
4.根据权利要求3所述的方法,其特征在于,通过所述目标分级模型对所述多个词条中未标注等级的第二目标词条的歧义程度进行分级,得到所述第二等级数据包括:
在所述多个词条中,对所述第一特征集合和所述第二特征集合进行训练,得到第三分级模型,所述第三分级模型用于预测所述第二目标词条的置信度;
通过所述第三分级模型预测所述第二目标词条的置信度,得到第一置信度,且从所述多个词条中获取所述第一置信度大于第一阈值的所述第二目标词条;
对所述第一置信度大于所述第一阈值的所述第二目标词条的歧义程度进行分级,得到所述第二等级数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710952460.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:实体提取方法和装置、计算机设备和存储介质
- 下一篇:信息处理方法及相关产品





