[发明专利]多轮对话模型的生成方法、测试方法、装置及电子设备有效
申请号: | 201910088049.X | 申请日: | 2019-01-29 |
公开(公告)号: | CN111488436B | 公开(公告)日: | 2023-05-05 |
发明(设计)人: | 李庆功 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/332 | 分类号: | G06F16/332;G06F11/36 |
代理公司: | 广州铸智知识产权代理有限公司 44886 | 代理人: | 徐瑞红 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 轮对 模型 生成 方法 测试 装置 电子设备 | ||
1.一种多轮对话模型的生成方法,包括:
确定待优化的多轮对话模型,该多轮对话模型包括多个对话节点,每个对话节点包括预设的机器人提问以及根据用户答复而执行的处理动作;
根据用户配置数据生成用于对多轮对话模型进行优化测试的测试语料集;
使用该测试语料集对所述多轮对话模型的各个对话路径进行测试,以对所述多轮对话模型进行优化;
其中,所述根据用户配置数据生成用于对多轮对话模型进行优化测试的测试语料集,包括:
根据多轮对话模型的各个对话节点的处理动作,提取出多个测试对话路径;
根据各个测试对话路径中每个对话节点的机器人提问和处理动作,分别生成作为用户答复的测试语料,所述测试语料的语义与对应的测试对话路径相匹配;
将每个测试对话路径中各个对话节点的测试语料,按照对应的测试对话路径的对话节点顺序,形成测试语料序列并作为测试语料子集;
将各个测试对话路径对应的测试语料子集组合后,形成所述测试语料集。
2.根据权利要求1所述的方法,其中,所述确定待优化的多轮对话模型包括:
响应于用户在模型设计平台上的画布界面的操作,生成所述多轮对话模型的对话节点以及对话节点之间的连接关系。
3.根据权利要求1所述的方法,其中,所述使用该测试语料集对所述多轮对话模型的各个对话路径进行测试包括:
获取多轮对话模型中的测试对话路径;
根据测试对话路径上的各个对话节点中的机器人提问,从测试语料集中获取用户答复并进行回复;
判断形成的对话流与所述测试对话路径是否存在偏差,如果存在偏差,则执行报错处理。
4.一种多轮对话模型的测试方法,包括:
为用户提供语料生成的配置界面;
响应于用户在配置界面的配置信息,生成测试语料集;
使用该测试语料集,对多轮对话模型进行测试;
其中,所述响应于用户在配置界面的配置信息,生成测试语料集,包括:
根据多轮对话模型的各个对话节点的处理动作,提取出多个测试对话路径;
根据各个测试对话路径中每个对话节点的机器人提问和处理动作,分别生成作为用户答复的测试语料,所述测试语料的语义与对应的测试对话路径相匹配;
将每个测试对话路径中各个对话节点的测试语料,按照对应的测试对话路径的对话节点顺序,形成测试语料序列并作为测试语料子集;
将各个测试对话路径对应的测试语料子集组合后,形成所述测试语料集。
5.一种多轮对话模型的测试方法,包括:
获取多轮对话模型中的测试对话路径;
根据测试对话路径上的各个对话节点中的机器人提问,从测试语料集中获取用户答复并进行回复;
判断形成的对话流与所述测试对话路径是否存在偏差,如果存在偏差,则执行报错处理;
其中,所述方法还包括:
根据多轮对话模型的各个对话节点的处理动作,提取出多个测试对话路径;
根据各个测试对话路径中每个对话节点的机器人提问和处理动作,分别生成作为用户答复的测试语料,所述测试语料的语义与对应的测试对话路径相匹配;
将每个测试对话路径中各个对话节点的测试语料,按照对应的测试对话路径的对话节点顺序,形成测试语料序列并作为测试语料子集;
将各个测试对话路径对应的测试语料子集组合后,形成所述测试语料集。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910088049.X/1.html,转载请声明来源钻瓜专利网。