[发明专利]一种ETL软件研发测试管理方法及系统

说明书

本发明公开了一种ETL软件研发测试管理方法及系统，通过根据数据表元数据信息获得字段信息；根据字段信息获得测试数据；根据数据表数据信息获得数据类型；根据数据类型获得检核脚本；获得第一录入信息；根据第一录入信息获得第一程序脚本；根据第一程序脚本，获得第一提取数据包括源表信息、目标表信息；根据测试数据、检核脚本、第一提取数据，获得第一打包信息；根据第一打包信息，获得测试案例信息；根据测试案例信息，获得回归测试案例库，所述回归测试案例库支持程序持续集成。解决测试管理平台功能单一，不能满足研发测试的各项需求的技术问题。达到测试数据、程序脚本、检核脚本的整合，减少了人工测试工作量的技术效果。

技术领域

本发明涉及计算机技术领域，尤其涉及一种ETL软件研发测试管理方法及系统。

背景技术

ETL，是英文Extract-Transform-Load的缩写，用来描述将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。ETL所描述的过程，一般常见的作法包含ETL或是ELT(Extract-Load-Transform)，并且混合使用。通常愈大量的数据、复杂的转换逻辑、目的端为较强运算能力的数据库，愈偏向使用ELT，以便运用目的端数据库的平行处理能力。

目前ETL研发和测试管理技术方案主要有：通过调用ETL冒烟测试存储过程，实现目标数据表加工，通过对目标数据表的数据分布、空值比例、最大值、最小值等检核，加工出检核报表，进而核验ETL程序质量。该方法自动化程序较高，能够很好检核目标表数据质量。但对于ETL脚本测试而言，仅仅是冒烟测试是不够的，系统测试、性能测试、业务测试、回归测试均需要大量的测试数据、测试案例准备。该专利覆盖的范围过于狭窄。或者通过预期结果表与测试结果表的逐项比较等方法，检核测试结果表的数据质量，进而检核ETL脚本质量。该方法准确性虽高，但需要大量的数据准备工作，在面临大数据量加工时，预期结果表(即理论值)的准备需要大量工作，且无法做到测试案例的持续积累及自动化测试。

但本申请发明人在实现本申请实施例中发明技术方案的过程中，发现上述技术至少存在如下技术问题：

现有技术中存在测试管理平台功能单一，不能满足研发测试的各项需求的技术问题。

发明内容

本申请实施例通过提供一种ETL软件研发测试管理方法及系统，解决了现有技术中存在测试管理平台功能单一，不能满足研发测试的各项需求的技术问题。达到了测试数据、程序脚本、检核脚本的整合，有效降低了测试复杂度，减少了人工测试工作量的技术效果。

鉴于上述问题，提出了本申请实施例提供一种ETL软件研发测试管理方法及系统。

第一方面，本申请实施例提供了一种ETL软件研发测试管理方法，获得数据表元数据信息；根据所述数据表元数据信息，获得字段信息；根据所述字段信息，获得测试数据；根据所述数据表数据信息，获得数据类型；根据所述数据类型，获得检核脚本；获得第一录入信息，所述第一录入信息包括源表信息、目标表信息及所述源表与目标表之间的字段映射关系；根据所述第一录入信息，获得第一程序脚本；根据所述第一程序脚本，获得第一提取数据，所述第一提取数据包括所述源表信息、所述目标表信息；根据所述测试数据、所述检核脚本、所述第一提取数据，获得第一打包信息；根据所述第一打包信息，获得测试案例信息；根据所述测试案例信息，获得回归测试案例库，所述回归测试案例库支持程序持续集成。

优选的，所述根据所述字段信息，获得测试数据，包括：获得预设规则；获得预设算法；根据所述字段信息、所述预设规则、所述预设算法，获得字段对应的各类数据；根据所述字段信息，获得日期字段；根据所述日期字段，获得所述数据日期信息；根据所述各类数据、所述数据日期信息，获得所述测试数据。