[发明专利]一种实现指标化业务数据勾稽的方法

说明书

本发明公开了一种实现指标化业务数据勾稽的方法，属于数据处理技术领域，针对现有技术中对于单笔业务的明细数据的勾稽、校验支持不足,无法作为数据核对要求，在业务快速迭代过程中需要新增勾稽规则时响应速度无法满足需要的问题，本发明提供一套能够支撑新兴的分布式微服务系统的业务勾稽方法，所述方法包括多数据源采集、指标化数据勾稽和勾稽及监控报表三个部分，其目的在于，打破信贷业务数据勾稽的技术壁垒，使勾稽业务数据自动化，为信贷系统测试，信贷业务验收和线上业务提供统一的验证规则。

技术领域

本发明属于数据处理技术领域，具体涉及一种实现指标化业务数据勾稽的方法。

背景技术

目前传统软件系统已演变为分布式系统，传统技术架构和信贷业务系统被拆为业务独立的微服务，但也带来了信贷业务数据存储分散，数据关系更加复杂化的问题，信贷系统项目组内的业务人员及测试人员在测试阶段和验收阶段需要查看各个服务的业务数据再进行数据核对，其效率和准确性都无法满足实际需要。

目前相似业务告警类系统均只针对在统计某类数据然后定义告警规则的进行数据告警，但对于单笔信贷业务的明细数据的勾稽、校验支持不足,无法作为数据核对要求，在信贷业务快速迭代过程中需要新增勾稽规则时响应速度无法满足需要。

但是为了快速满足信贷业务高速的发展，信贷业务的快速迭代，业务数据的逻辑复杂度越来越高，信贷业务数据勾稽的壁垒越来越高，因此有必要开发一种能够支撑新兴的分布式微服务系统的业务勾稽方法和系统，为信贷系统测试，信贷业务验收和线上业务提供统一的验证规则。

发明内容

针对现有技术中对于单笔业务的明细数据的勾稽、校验支持不足,无法作为数据核对要求，在业务快速迭代过程中需要新增勾稽规则时响应速度无法满足需要的问题，本发明提供一套能够支撑新兴的分布式微服务系统的业务勾稽方法，其目的在于，自动化勾稽业务数据，为信贷系统测试，信贷业务验收和线上业务提供统一的验证规则。

本发明采用的技术方案如下：

一种实现指标化业务数据勾稽的方法，其特征在于，具体实现过程为：

步骤1：通过多数据源采集服务将源系统的信贷业务数据转化为基础数据集；

步骤2：基础数据集通过根据信贷业务数据的实际业务含义，构建基础指标配置；

步骤3：将基础指标配置载入到函数运算表达式中，得到过程指标配置和勾稽指标配置；

步骤4：利用基础指标配置、过程指标配置和勾稽指标配置数据建立指标树形关系；

步骤5：利用指标树形关系对基础指标、过程指标和勾稽指标进行数据处理，分别得到基础指标数据、过程指标数据和勾稽指标数据的值；

步骤6：将计算得到基础指标数据储存在基础指标结果表中；过程指标数据和勾稽指标数据的值存储在指标数据表中，该数据表作为监控和测试信贷数据的依据，可以为外部监控系统提供勾稽结果，监控系统可以通过数据采集的方式获取到指标勾稽服务的输出结果,检查勾稽指标的指标值为false时,监控系统可以利用短信,邮件等形式向业务人员发出告警信息。

进一步的，所述步骤1包括：

针对简单数据储存结构的信贷数据源，直接利用数据库工具进行数据库表数据同步，将同步的数据储存为基础数据集；

针对复杂数据存储结构的信贷数据源，在无法直接抽取源表满足基础数据表的情况下，可以由业务系统按要求提供抽数接口，利用程序进行RPC调用将业务系统返回的数据存储为基础数据集。

进一步的，所述信贷数据源数据包括CMP借据数据、CMP财务数据和CMP对账数据。

进一步的，所述步骤2中的基础指标配置的配置项包括:指标编号，指标名称，数据类型，基础数据表名，字段名，采集类型，采集条件。