[发明专利]意图识别模型测试方法、装置、计算机设备和存储介质有效
申请号: | 202010879682.3 | 申请日: | 2020-08-27 |
公开(公告)号: | CN112016297B | 公开(公告)日: | 2023-03-28 |
发明(设计)人: | 刘芳 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06F40/211 | 分类号: | G06F40/211;G06F40/242 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 董慧 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 意图 识别 模型 测试 方法 装置 计算机 设备 存储 介质 | ||
1.一种意图识别模型测试方法,其特征在于,所述方法包括:
接收终端发送的意图识别模型生成请求,所述意图识别模型生成请求携带有请求内容,所述请求内容包括,待生成的意图识别模型包括哪些语料逻辑以及每一个语料逻辑的数量;
对所述请求内容进行解析得到解析结果,并获取所述解析结果对应的语料逻辑,所述语料逻辑包括全匹配逻辑、可选逻辑、必选逻辑、逻辑或、词典参数逻辑以及通配符逻辑;
根据所述语料逻辑,建立对应所述意图识别模型生成请求的意图识别模型;
确定对应所述语料逻辑的语料片段,并根据所述语料片段生成对应的意图测试语料;
通过所述意图测试语料对所述意图识别模型进行测试。
2.根据权利要求1所述的方法,其特征在于,所述确定对应所述语料逻辑的语料片段,并生成对应的意图测试语料,包括:
确定对应所述语料逻辑的正向语料片段和反向语料片段,并基于所述正向语料片段和反向语料片段,生成正向意图测试语料以及反向意图测试语料;
所述通过所述意图测试语料对所述意图识别模型进行测试,包括:
分别通过所述正向意图测试语料以及反向意图测试语料对所述意图识别模型进行测试。
3.根据权利要求1所述的方法,其特征在于,所述确定对应所述语料逻辑的语料片段,并生成对应的意图测试语料,包括:
从所述语料逻辑对应的数据库中获取对应的语料片段;
按照建立的意图识别模型中各语料逻辑的排列顺序,对获取的所述语料片段进行拼接,生成对应的意图测试语料。
4.根据权利要求3所述的方法,其特征在于,所述从所述语料逻辑对应的数据库中获取对应的语料片段,包括:
从语料词典数据库对应各所述语料逻辑的语料词典中获取对应的词典语料片段;
所述语料词典的建立方式包括:
建立字符库;
获取语料词典生成请求,并根据所述语料词典生成请求以及所述字符库生成词典语料片段;
基于生成的词典语料片段建立语料词典。
5.根据权利要求4所述的方法,其特征在于,所述根据所述语料词典生成请求以及所述字符库生成词典语料片段,包括:
基于所述语料词典生成请求,确定待生成语料词典中待生成词典语料片段的语料数量以及语料长度;
从字符库中随机选取字符,并组成对应所述语料长度的词典语料片段;
所述基于生成的词典语料片段建立语料词典,包括:
根据所述语料数量,生成对应所述语料数量的多个词典语料片段,得到词典语料片段集;
将所述词典语料片段集存储至建立的空白语料词典中,得到对应所述语料词典生成请求的语料词典。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述意图识别模型生成请求、各语料逻辑以及意图测试语料中的至少一个上传至区块链节点中进行存储。
7.一种意图识别模型测试装置,其特征在于,所述装置包括:
接收模块,用于接收终端发送的意图识别模型生成请求,所述意图识别模型生成请求携带有请求内容,所述请求内容包括,待生成的意图识别模型包括哪些语料逻辑以及每一个语料逻辑的数量;
解析模块,用于对所述请求内容进行解析得到解析结果,并获取所述解析结果对应的语料逻辑,所述语料逻辑包括全匹配逻辑、可选逻辑、必选逻辑、逻辑或、词典参数逻辑以及通配符逻辑;
模型建立模块,用于根据所述语料逻辑,建立对应所述意图识别模型生成请求的意图识别模型;
测试语料生成模块,用于确定对应所述语料逻辑的语料片段,并根据所述语料片段生成对应的意图测试语料;
测试模块,用于通过所述意图测试语料对所述意图识别模型进行测试。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010879682.3/1.html,转载请声明来源钻瓜专利网。