[发明专利]测试语料生成方法、装置及电子设备有效

专利信息
申请号: 202010273970.4 申请日: 2020-04-09
公开(公告)号: CN111488463B 公开(公告)日: 2023-08-29
发明(设计)人: 宋雨 申请(专利权)人: 中国银行股份有限公司
主分类号: G06F16/36 分类号: G06F16/36;G06F16/332
代理公司: 北京集佳知识产权代理有限公司 11227 代理人: 薛娇
地址: 100818 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 测试 语料 生成 方法 装置 电子设备
【说明书】:

发明提供了一种测试语料生成方法、装置及电子设备,其中方法包括:获取线上的历史测试语料;基于实体库对所述历史测试语料进行实体识别确定所述历史测试语料包含的至少两个实体维度;于知识图谱网络库中确定所述至少两个实体维度组成的多个短语;分别将所述多个短语替换所述历史测试语料中所述至少两个实体维度对应的短语,获得多条测试语料。本发明提供的实施例可以基于实体库和知识图谱网络库自动化生成测试语料,从而自动化丰富测试语料库。

技术领域

本申请涉及大数据技术领域,尤其涉及测试语料生成方法、装置及电子设备。

背景技术

问答机器人目前已经逐步入银行以及一些客服系统中。为了检验问答机器人的性能,通常采用命中率来衡量机器人性能。也即通过一些测试语料来测试问答机器人,从而获得问答机器人的命中率。

测试过程中测试时间和人力资源投入有限,无法在有限的资源条件下,制定出足够多的测试语料,无法对问答机器人的命中率进行准确全面的测试。

因此现在需要一种可以自动扩展测试语料库的方案,以便丰富测试测试语料库。

发明内容

鉴于此,本申请提供一种测试语料生成方法、装置及电子设备,可以自动化丰富测试语料库。

为了实现上述目的,本发明提供了下述技术特征:

一种测试语料生成方法,包括:

获取线上的历史测试语料;

基于实体库对所述历史测试语料进行实体识别确定所述历史测试语料包含的至少两个实体维度;

于知识图谱网络库中确定所述至少两个实体维度组成的多个短语;

分别将所述多个短语替换所述历史测试语料中所述至少两个实体维度对应的短语,获得多条测试语料。

可选的,在所述获取线上的历史测试语料之前还包括:

建立各个产品的多维度知识图谱;其中不同产品的多维度知识图谱中的多个维度相同;

各个产品的多维度知识图谱组成知识图谱网络库。

可选的,在所述建立各个产品的多维度知识图谱之后,还包括:

从各个产品的多维度知识图谱抽取相同维度的实体组成一实体集,重复执行该步骤直到获得多个维度对应的多个实体集;

所述多个维度的实体集组成所述实体库。

可选的,所述基于实体库对所述历史测试语料进行实体识别确定所述历史测试语料包含的至少两个实体维度包括:

将所述历史测试语料分别于所述实体库中多个维度的实体集进行实体识别;

若于一个实体集中识别成功则确定所述历史测试语料包含该实体维度;

若于一个实体集中识别不成功则确定所述历史测试语料不包含该实体维度;

将于所述实体库中多个维度的实体集中识别成功的实体维度,确定为所述历史测试语料包含的至少两个实体维度。

可选的,所述多维度知识图谱包括产品名称、产品操作和业务属性三个维度。

可选的,在所述至少两个实体维度包括产品名称和产品操作的情况下,所述于知识图谱网络库中确定所述至少两个实体维度组成的多个短语包括:

针对所述知识图谱网络库中各个产品实体执行下述操作:

于所述知识图谱网络库中产品实体的知识图谱;

于所述产品实体的知识图谱中确定与该产品实体对应的多个产品操作;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010273970.4/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top