[发明专利]一种意图标签的标注方法、装置、服务器及存储介质有效
申请号: | 201811454677.7 | 申请日: | 2018-11-30 |
公开(公告)号: | CN111259918B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 张欢韵;杨全;杨泾 | 申请(专利权)人: | 重庆小雨点小额贷款有限公司 |
主分类号: | G06F18/241 | 分类号: | G06F18/241;G06F18/22 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 401120 重*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 意图 标签 标注 方法 装置 服务器 存储 介质 | ||
1.一种意图标签的标注方法,其特征在于,所述方法包括:
获取第一数据集合和第二数据集合,所述第一数据集合包括第一数量个未标注意图标签的数据,所述第二数据集合包括第二数量个已标注意图标签的数据,所述第二数量个已标注意图标签的数据所标注的意图标签对应着多个意图;
利用相似度计算模型对所述第一数据集合和所述第二数据集合进行处理得到第三数据集合,所述第三数据集合包括多个标注第一意图标签的数据;
利用分类模型对所述第二数据集合和所述第三数据集合进行处理,以从所述第三数据集合中确定出所述多个意图对应的目标数据集合;
其中,所述相似度计算模型包括第一相似度计算模型和第二相似度计算模型,所述利用相似度计算模型对所述第一数据集合和所述第二数据集合进行处理得到第三数据集合,包括:
将所述第一数据集合和所述第二数据集合中的数据输入所述第一相似度计算模型中进行处理,确定第一目标数据与第二目标数据之间的第一相似度,所述第一目标数据为所述第一数据集合中的任意一个数据,所述第二目标数据为所述第二数据集合中的任意一个数据;按照所述第一相似度从大到小的顺序对各个第二目标数据进行排序,并获取排序排在前N位的第二目标数据对应的N个意图标签,所述N为正整数;
将所述第一数据集合和所述第二数据集合中的数据输入所述第二相似度计算模型中进行处理,确定所述第一目标数据与所述第二目标数据之间的第二相似度;按照所述第二相似度从大到小的顺序对各个第二目标数据进行排序,并获取排序排在前M位的第二目标数据对应的M个意图标签,所述M为正整数,所述M等于所述N;
将所述N个意图标签和所述M个意图标签确定为所述第一目标数据对应的多个意图标签;检测所述多个意图标签中相同意图标签的数量是否大于或等于预设数量;若是,则将所述第一目标数据加入第三数据集合中,并将所述相同意图标签作为所述第一目标数据对应的第一意图标签;
其中,所述分类模型包括第一分类模型和第二分类模型,所述利用分类模型对所述第二数据集合和所述第三数据集合进行处理,以从所述第三数据集合中确定出所述多个意图对应的目标数据集合,包括:
将所述第二数据集合和所述第三数据集合中的数据输入所述第一分类模型中进行处理,以从所述第三数据集合中确定出第四数据集合,所述第一分类模型是基于所述第二数据集合训练得到的,所述第四数据集合包括多个标注所述第一意图标签的数据;将所述第三数据集合中的数据输入所述第二分类模型中进行处理,以从所述第三数据集合中确定出第五数据集合,所述第二分类模型是基于所述第四数据集合训练得到的,所述第五数据集合包括多个标注所述第一意图标签的数据;将所述第四数据集合和所述第五数据集合作为所述多个意图对应的目标数据集合。
2.根据权利要求1所述的方法,其特征在于,所述第二数据集合中的第二数量个已标注意图标签的数据对应多个意图标签,且所述多个意图标签对应着所述多个意图,所述将所述第二数据集合和所述第三数据集合中的数据输入所述第一分类模型中进行处理,以从所述第三数据集合中确定出第四数据集合,包括:
将所述第二数据集合和所述第三数据集合中的数据输入所述第一分类模型中进行处理,获取第三目标数据分别与所述第二数据集合中各个数据之间的相似度,所述第三目标数据为所述第三数据集合中的任意一个数据;
基于所述第三目标数据分别与所述第二数据集合中各个数据之间的相似度、以及所述第二数据集合中各个数据对应的意图标签,确定所述第三目标数据对应目标意图标签的平均概率以及最大概率,所述目标意图标签为所述多个意图标签中的任意一个;
检测所述第三目标数据对应各个目标意图标签的最大概率是否均小于预设数值,若否,则将所述第三目标数据所对应平均概率最大的目标意图标签,确定为所述第三目标数据对应的第二意图标签;
当所述第三目标数据对应的第一意图标签与所述第二意图标签相同时,将所述第三目标数据加入第四数据集合中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆小雨点小额贷款有限公司,未经重庆小雨点小额贷款有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811454677.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电机控制结构及具有其的一体化电机
- 下一篇:一种空调系统