[发明专利]一种测试结果校验方法、装置、设备和介质

说明书

本发明实施例公开了一种测试结果校验方法、装置、设备和介质，涉及测试领域。该方法包括：在执行测试后，根据所述测试的运行数据获取校验特征；将所述校验特征输入预先训练完成的结果校验模型，输出针对测试结果的校验结果。本发明实施例提供的一种测试结果校验方法、装置、设备和介质，实现了对测试结果的校验，同时降低校验成本，提高校验的准确率和稳定性。

技术领域

本发明实施例涉及测试领域，尤其涉及一种测试结果校验方法、装置、设备和介质。

背景技术

自动化测试用例在各种回归测试中起到的作用非常关键，不仅节约了时间人力测试成本，而且提高了回归测试效率。自动化测试用例效果的关键，除了测试用例设计过程中，各种参数异常情况考虑的是否全面，返回结果正确性的校验也是十分关键的一环。如果不能准确的做好返回结果的校验，即使测试用例触发了问题依然不能被快速发现，从而极大降低自动化测试效果。

目前，自动化测试中的校验方法主要有：assert(断言)校验方法和diff校验方法两种。其中assert校验方法是对测试返回结果的每个值设定具体的规则来进行校验；而diff校验方法可以描述为：搭建两套相同的运行环境，将标准数据在其中一套运行环境中运行，将待测试数据在另一套运行环境中运行，比较两套运行环境的输出结果，实现对结果的校验。

但是，发明人在实现本发明的过程中发现上述校验方法存在如下问题：1)当测试返回结果的值较多时，assert校验方法需要对每个值都设定具体的校验规则，从而导致校验成本高的问题。2)diff校验方法中对两套运行环境一致性的维护成本高；由于影响运行环境一致性的因素多，从而导致对测试结果校验的稳定性差；由于两套运行环境稍有偏差就会影响测试准确率，从而导致对测试结果校验的准确率低。

发明内容

本发明实施例提供一种测试结果校验方法、装置、设备和介质，以实现对测试结果的校验，同时降低校验成本，提高校验的准确率和稳定性。

第一方面，本发明实施例提供了一种测试结果校验方法，该方法包括：

在执行测试后，根据所述测试的运行数据获取校验特征；

将所述校验特征输入预先训练完成的结果校验模型，输出针对测试结果的校验结果。

进一步的，在将所述校验特征输入预先训练完成的结果校验模型之前，还包括：

从测试用例运行的历史数据中获取校验特征和校验结果；

基于设定模型学习算法，根据所述校验特征和所述校验结果进行模型训练，生成所述结果校验模型。

进一步的，将所述校验特征输入预先训练完成的结果校验模型包括:

删除所述校验特征中的噪声数据，其中噪声数据是与测试结果的校验无关的特征数据；

将删除噪声数据后的校验特征输入预先训练完成的结果校验模型。

进一步的，删除所述校验特征中的噪声数据包括：

获取噪声数据的特征名称；

根据所述特征名称确定所述噪声数据在所述校验特征中的位置；

将所述校验特征中所述位置处的数据删除。

进一步的，在将所述校验特征输入预先训练完成的结果校验模型，输出针对测试结果的校验结果之后，还包括:

若校验结果与事实不符，则修改校验结果，并利用修改后的校验结果与所述校验特征对所述结果校验模型进行训练。

进一步的，将所述校验特征输入预先训练完成的结果校验模型包括：

若所述校验特征为视频，则按照设定步长从视频中提取至少一幅图片；