[发明专利]针对云端系统具备高容错性的稳定性测试方法

说明书

本发明公开了一种针对云端系统具备高容错性的稳定性测试方法，包括：拆分测试任务；创建稳定性测试场景；试运行测试场景和创建测试结果分析模板；设计测试场景启动脚本程序；设计测试结果自动分析脚本程序；创建脚本程序运行计划任务；对测试结果采样分析；整理采样分析结果成稳定性性能指标。本发明在操作上具备高容错性，在数据分析粒度上最细可达到1秒的粒度，大幅度提高了系统稳定性测试的执行成功率，采用的场景拆分技术和采样技术有效减少了数据分析量，降低了稳定性测试数据分析的计算资源需求。

技术领域

本发明涉及性能测试技术领域，具体涉及一种针对云端系统具备高容错性的稳定性测试方法。

背景技术

在性能测试领域，云端系统的稳定性指标是一个非常重要的性能指标，云端系统上线前一般均需要进行稳定性测试，测量系统是否可达到n x 24小时不间断提供服务的能力，以及测量该期间系统吞吐能力、响应时间的服务质量等。

目前稳定性的测试方法，一般是将综合测试场景的运行时间设定为要求的nx 24小时，在测试工具连续运行n x 24小时后，获取测试工具收集到的数据进行分析，检查该运行期间内被测系统是否有过停车，吞吐能力和响应时间是否呈现波动或衰减等现象。该方法存在如下缺点：

1)稳定性测试场景必须一次性执行成功，中途失败则需重新执行，即不具备容错性；

2)所有测试数据集中在同一个场景中，在运行时间长、系统吞吐能力高的场景下，稳定性测试将产生海量的数据，不易处理，测试工具不具备处理这些数据的能力，需要大量的人工整理和分析，才能得到需要的测试结论；

3)由于测试数据的时间跨度大，在分析TPS时，工具能支撑的最小时间粒度可能需达到数分钟之多，粗粒度的数据分析会导致测试信息的丢失，如：若测试期间系统出现长达数秒或数十秒的停车，就无法被测试发现。

为了解决现有稳定性测试方法存在的问题，亟需一种具备高容错能力、可获取到细粒度测试数据的稳定性测试方法。

发明内容

本发明克服了以上背景技术部分指出的问题，提供一种针对云端系统具备高容错性的稳定性测试方法。

考虑到现有技术的上述问题，根据本发明公开的一个方面，本发明采用以下技术方案：

一种针对云端系统具备高容错性的稳定性测试方法，包括：

步骤一、根据稳定性测试需求拆分测试任务；

步骤二、创建稳定性测试场景；

步骤三、试运行测试场景和创建测试结果分析模板；

步骤四、编写/修改启动测试场景的脚本程序；

步骤五、编写/修改测试结果自动分析脚本程序；

步骤六、创建脚本程序运行计划任务；

步骤七、对测试结果采样分析。

为了更好地实现本发明，进一步的技术方案是：

根据本发明的一个实施方案，所述步骤一的根据包括：

高峰期时段的长度或稳定性测试的运行天数。

根据本发明的另一个实施方案，所述步骤一的任务拆分方式包括：

测试场景时长大于等于高峰期时段长度。

根据本发明的另一个实施方案，所述步骤一的任务拆分方式包括：

所有测试场景和所有场景运行之间的间隔时长之和，是24小时的整数倍。

根据本发明的另一个实施方案，所述步骤二包括：