[发明专利]对话机器人的检测方法、装置、电子设备及存储介质在审
申请号: | 202110477010.4 | 申请日: | 2021-04-29 |
公开(公告)号: | CN113760744A | 公开(公告)日: | 2021-12-07 |
发明(设计)人: | 黄振希;张坤;傅成彬 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F11/36 | 分类号: | G06F11/36;G06F9/54;G06F16/332 |
代理公司: | 深圳市隆天联鼎知识产权代理有限公司 44232 | 代理人: | 叶虹 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 对话 机器人 检测 方法 装置 电子设备 存储 介质 | ||
1.一种对话机器人的检测方法,其特征在于,所述方法包括:
获取对话机器人的对话配置信息,所述对话配置信息包括一个或者多个对话树,所述对话树包括多种类型的节点;
对所述对话配置信息进行静态校验,以校验所述对话配置信息的合法性;
若校验结果为所述对话配置信息合法,则遍历所述对话树的所有节点,生成多个测试用例;所述测试用例由多个对话组合构成;所述对话组合包括根据至少两个不同类型的节点的配置信息生成的对话内容;
基于多个所述测试用例模拟用户与所述对话机器人进行对话交互,得到多个测试结果;
根据多个所述测试结果生成检测报告。
2.根据权利要求1所述的对话机器人的检测方法,其特征在于,所述对话树的节点类型包括用户问题节点、机器人询问节点、机器人判断节点和机器人答案节点中的至少两种;所述对话组合包括:
根据用户问题节点和机器人询问节点的配置信息生成的对话内容;或
根据用户问题节点和机器人答案节点的配置信息生成的对话内容;或
根据第一机器人询问节点、机器人判断节点和第二机器人询问节点的配置信息生成的对话内容;或
根据机器人询问节点、机器人判断节点和机器人答案节点的配置信息生成的对话内容。
3.根据权利要求2所述的对话机器人的检测方法,其特征在于,所述遍历所述对话树的所有节点,生成多个测试用例包括:
以所述对话树的用户问题节点为起始,通过深度优先遍历法遍历所述对话树的所有节点;
当遍历到一个机器人答案节点时,根据所述用户问题节点至所述机器人答案节点所形成的多个对话组合生成一个测试用例。
4.根据权利要求3所述的对话机器人的检测方法,其特征在于,在以当前对话树的用户问题节点为起始,通过深度优先遍历法遍历所述当前对话树的所有节点之后,所述方法还包括:
当遍历到一个机器人判断节点时,通过宽度优先遍历法遍历所述机器人判断节点引出的对话树分支;
对于每个对话树分支,继续通过深度优先遍历法遍历剩余节点。
5.根据权利要求1所述的对话机器人的检测方法,其特征在于,所述测试用例中的对话内容包括模拟输入信息和机器人预期回复,在遍历所述对话树的所有节点,生成多个测试用例之后,所述方法还包括:
通过语义相似度算法生成所述模拟输入信息的相似输入信息;
根据所述相似输入信息和所述机器人预期回复生成扩展测试用例。
6.根据权利要求1所述的对话机器人的检测方法,其特征在于,所述测试用例中的对话内容包括模拟输入信息和机器人预期回复;所述基于多个所述测试用例模拟用户与所述对话机器人进行对话交互,得到多个测试结果包括:
基于所述模拟输入信息与所述对话机器人进行对话交互,得到所述对话机器人反馈的应答结果;
若所述应答结果与所述机器人预期回复一致,则得到的测试结果为测试通过;
若所述应答结果与所述机器人预期回复不一致,则得到的测试结果为测试失败。
7.根据权利要求1-6中任一项所述的对话机器人的检测方法,其特征在于,所述获取对话机器人的对话配置信息包括:
根据对话机器人检测请求,由任务管理服务器创建机器人检测任务;
将所述机器人检测任务加入消息中间件的任务队列;
由任务执行服务器从所述任务队列读取机器人检测任务,以获取与所述机器人检测任务相对应的对话机器人的对话配置信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110477010.4/1.html,转载请声明来源钻瓜专利网。