[发明专利]数据系统的测试系统和测试方法

权利要求书

1.一种数据系统的测试系统，其特征在于，包括：

用户层，用于为用户提供访问所述测试系统的方式；

中间应用层，用于从所述用户层接收所述用户提交的请求，并且对于底层大数据平台协调多个任务进行请求的解析和处理；以及

底层大数据平台，为所述数据系统的数据存储层并且包括本地文件系统、分布式文件系统以及数据库，

其中，所述中间应用层进一步包括数据访问接口，用于读取和访问各类大数据平台的数据和文件，

所述测试系统还包括测试基准模块，用于基于数据类型、样本数据、SQL标准、和标准接口进行设计，在所述数据类型、所述样本数据、所述SQL标准、和所述标准接口的基础上扩展功能基准、性能基准、稳定性基准和可靠性基准，

提供测试数据包括：生成测试系统提交测试任务所依赖的样本数据、预期结果数据，其中，根据所述测试基准模块中的样本数据，保持真实数据的分布特征并且根据翻倍增加原则和参数控制数据大小、数据格式和结构以用于不同规模的测试环境。

2.根据权利要求1所述的测试系统，其特征在于，所述中间应用层还包括：

核心服务模块，用于提供数据服务，处理接收到的用户请求并将分解的请求分发到各个子任务模块；以及

服务的公共模块，用于为各种服务提供辅助的日志管理、异常处理、服务异常的监控。

3.根据权利要求2所述的测试系统，其特征在于，所述核心服务模块包括：

数据生成服务子模块，用于提供所述测试数据和所述测试任务；

任务提交服务子模块，用于将所述用户的测试请求提交到相应的大数据平台；

结果比对服务子模块，用于判断各个测试任务的正确性和技术性能指标；以及

资源监控服务子模块，用于采集被测系统的负载信息，对分析所述被测系统的性能指标提供数据支撑。

4.根据权利要求3所述的测试系统，其特征在于，所述翻倍增加原则包括：在所述样本数据翻倍时，保证一列数据完全不同以保证每条记录不同。

5.根据权利要求3所述的测试系统，其特征在于，所述翻倍增加原则包括：采用所述样本数据的同类型列经过交叉运算进行所述样本数据的翻倍，以保证数据特性不变。

6.根据权利要求3所述的测试系统，其特征在于，所述样本数据包括正常数据和异常数据，其中，所述异常数据用于测试系统的容错性和数据倾斜的异常情况。

7.根据权利要求3所述的测试系统，其特征在于，所述数据生成服务子模块包括：测试数据生成、查询任务生成、查询结果集生成以及依赖建表生成，其中，所述测试数据生成选择所述测试系统自带的样本数据或者根据所述翻倍增加原则重新生成新的样本数据。

8.根据权利要求3所述的测试系统，其特征在于，所述任务提交服务子模块用于将所述用户的测试请求提交到相应的大数据平台进一步包括：在所述测试任务所依赖的表、数据已经生成并且准备工作已经完成之后，将所述用户的测试请求提交到相应的大数据平台。

9.根据权利要求8所述的测试系统，其特征在于，所述任务提交服务子模块包括加载任务提交、查询任务提交和其他任务提交。

10.根据权利要求3所述的测试系统，其特征在于，所述结果比对服务子模块用于判断各个测试任务的正确性和技术性能指标进一步包括提供加载类和查询类的测试任务的正确性比对和相关指标的计算服务。

11.根据权利要求10所述的测试系统，其特征在于，所述结果比对服务子模块包括查询结果判断、加载结果判断以及其他测试任务结果判断。

12.根据权利要求3所述的测试系统，其特征在于，所述资源监控服务子模块用于采集被测系统的负载信息进一步包括提供大数据集群节点及节点上各组件关键服务的负载和资源使用情况的监控。