[发明专利]基于人机对话的任务测试方法、相关设备及存储介质

摘要

一种基于人机对话的任务测试方法，包括：获取针对目标任务的状态机图；加载状态机图；对状态机图的节点Si对应的所有边以及节点S(i+x)进行遍历；若节点Si对应的所有边以及节点S(i+x)均遍历完成，且Si不是初始节点S0，确定第一边；从语料库中选取符合语义表示的第一语料；将第一语料发送至被测设备；根据被测设备的响应信息，确定第一系统状态；根据第一系统状态，更新状态机图的所有节点和所有边的状态；根据所有节点和所有边的状态与预设状态，对被测设备在目标任务上的成功率进行评估，获得第一测评结果。本申请还提供一种相关设备及存储介质。本申请能将海量的语料映射到测试系统的每一轮输入中进行端到端的成功率测试。