[发明专利]用于数据集群的测试方法和装置

说明书

技术领域

本发明涉及数据集群领域，特别涉及一种用于数据集群的测试方法和装置。

背景技术

大数据集群是指成千上万的计算机通过网络连接所组成的、能够共同完成数据存储、数据计算等任务的计算机集群。

大数据集群所承载的数据量巨大，业务复杂度也很高，因此，为了正常且稳定的运行，大数据集群必须具有高稳定性。而为了确保大数据集群的高稳定性，需要对大数据集群的生产环境进行测试。

但相关的测试方法中，一般都是构建出与大数据集群的生产环境类似的测试场景，在该测试场景下进行测试，构建测试场景耗费的成本很高；由于所构建的测试场景的业务多样性、业务复杂度和数据量等参数与大数据集群的生产环境有很大的差距，容易导致测试结果不准确，不易于发现大数据集群的生产环境所存在的缺陷，漏测率高。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种用于数据集群的测试方法。所述技术方案如下：

第一方面，提供了一种用于数据集群的测试方法，所述方法包括：

获取测试权限，所述测试权限与数据集群处理业务的权限隔离；

根据数据集群处理业务所用的计算资源，获取测试计算资源；

获取所述数据集群对所述业务的现网操作流和现网结果数据，所述现网结果数据包括现网业务指令的操作结果数据和处理业务过程的各项指标的现网实际参数；

对所述现网操作流进行还原处理，得到测试业务流，所述测试业务流包括处理所述业务过程中所接收到的业务指令；

基于所述测试计算资源和所述测试权限，执行所述测试业务流中的每一个业务指令对应的操作，得到所述测试业务流的测试结果数据，所述测试结果数据包括测试业务流中每一个业务指令对应的操作结果数据和所述各项指标的测试结果参数；

将所述现网结果数据和所述测试结果数据进行一致性对比，输出对比结果。

第二方面，提供了一种用于数据集群的测试装置，所述装置包括：

测试权限获取模块，用于获取测试权限，所述测试权限与数据集群处理业务的权限隔离；

资源获取模块，用于根据数据集群处理业务所用的计算资源，获取测试计算资源；

现网业务获取模块，用于获取所述数据集群对所述业务的现网操作流和现网结果数据，所述现网结果数据包括现网业务指令的操作结果数据和处理业务过程的各项指标的现网实际参数；

还原模块，用于对所述现网操作流进行还原处理，得到测试业务流，所述测试业务流包括处理所述业务过程中所接收到的业务指令；

测试结果数据获取模块，用于基于所述测试计算资源和所述测试权限，执行所述测试业务流中的每一个业务指令对应的操作，得到所述测试业务流的测试结果数据，所述测试结果数据包括测试业务流中每一个业务指令对应的操作结果数据和所述各项指标的测试结果参数；

对比模块，用于将所述现网结果数据和所述测试结果数据进行一致性对比，输出对比结果。

本发明实施例提供的技术方案带来的有益效果是：

本发明实施例提供的方法和装置，通过在数据集群中对现网操作流进行还原处理得到处理业务过程中接收到的业务指令，再次执行每个业务指令对应的操作，得到各项指标的测试结果数据，通过将各项指标的实际数据和测试结果数据进行一致性对比，输出对比结果。这种测试方法直接使用数据集群的生产环境进行测试，而无需额外搭建测试场景，极大地降低了测试过程中的人力投入和成本，且对数据集群的生产环境进行全量覆盖，增强了覆盖度，进一步地，提高了测试质量，降低了漏测率。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种用于数据集群的测试方法的流程图；

图2a是本发明实施例提供的一种用于数据集群的测试方法的流程图；

图2b是本发明实施例提供的权限示意图；

图2c是本发明实施例提供的获取测试业务流的示意图；

图2d是本发明实施例提供的调节业务指令示意图；

图2e是本发明实施例提供的输出对比结果示意图；

图2f是本发明实施例提供的功能模块示意图；

图2g是本发明实施例提供的数据集群框架图；

图2h是本发明实施例提供的缺陷个数效果图；