[发明专利]一种银行补录数据的批量解析和加载方法、装置及设备

说明书

本申请公开了一种银行补录数据的批量解析和加载方法、装置及设备，可应用于大数据领域以及金融领域，能够在大数据平台下批量解析并加载补录数据的信息，以便完成监管报表的制作，不仅降低了补录成本和人力资源，也大幅度提高了补录数据的及时性。该方法包括：首先梳理补录数据表名范围，并梳理补录字段名称及类型，然后，根据预设的补录需求，创建补录映射表，并在映射表里设置映射规则，接着，获取补录源数据，并构建补录目标表属性，以及解析补录源数据，得到补录源数据的解析结果；进而可以批量将补录源数据的解析结果加载到数据库中的补录目标表中，实现银行补录数据的批量解析和加载。

技术领域

本申请涉及大数据技术领域，尤其涉及一种银行补录数据的批量解析和加载方法、装置及设备。

背景技术

随着社会经济的高速发展，各大银行作为金融服务的中心，越来越多的客户通过银行办理各种金融业务，导致银行需要处理的补录数据越来越多。

目前银行BDP-ODSS(海外监管报送及内部管理主体应用)基于BDP大数据平台为满足海外各行监管报送、内部管理等主题应用，为海外各分行加工出海外共享数据集，打造海外监管报送和内部管理数据服务基础设施。系统通过自动抽取、计算、汇总和分析监管报表所需数据，生成监管报送要求的格式报表，减少手工操作工作量，提高工作效率，避免手工操作失误造成的各类差错，但是，海外各行的监管需求大相径庭，海外共享数据集不能完全满足监管报送的要求，因此，海外分行还需要通过BOCS-OSS-AIES(海外综合支持系统-信息补录)进行手动补录当地特色数据来完成监管报表的制作。但由于BOCS-OSS-AIES需要支持海外分行多元化的补录需求，产品设计把所有补录表的数据都存储在一张通用层补录信息表中，与实际分行所需的补录表结构不一致，所以补录数据通过UDP-ASVR(统一数据平台——分析层服务中心)下传至BDP-ODSS后是无法直接使用的。

发明内容

本申请实施例的主要目的在于提供一种银行补录数据的批量解析和加载方法、装置及设备，能够在大数据平台下批量解析并加载补录数据的信息，以便完成监管报表的制作，不仅降低了补录成本和人力资源，也大幅度提高了补录数据的及时性。

第一方面，本申请实施例提供了一种银行补录数据的批量解析和加载方法，所述方法包括：

梳理补录数据表名范围，并梳理补录字段名称及类型；

根据预设的补录需求，创建补录映射表，并在所述映射表里设置映射规则；

获取补录源数据，并构建补录目标表属性，以及解析补录源数据，得到补录源数据的解析结果；

批量将补录源数据的解析结果加载到数据库中的补录目标表中，实现银行补录数据的批量解析和加载。

可选的，所述梳理补录数据表名范围，并梳理补录字段名称及类型，包括：

根据预设的补录需求，获取补录数据表的表名以及表ID；并根据预设的补录需求，获取补录数据表的字段名和属性、以及表字段的字段ID。

可选的，所述获取补录源数据，并构建补录目标表属性，包括：

将统一数据平台的分析层服务中心UDP-ASVR中的数据加载到临时存储中；

根据补录数据表的表名获取表ID，并根据所述表ID获取映射表中补录目标表的字段名、位置、属性，用以构建补录目标属性。

可选的，所述解析补录源数据，得到补录源数据的解析结果，包括：

根据补录数据表的表名获取表ID，并根据所述表ID从所述临时存储中获取所有补录表的源数据集；

对所述源数据集进行逐条解析，得到补录源数据的解析结果。

第二方面，本申请实施例还提供了一种银行补录数据的批量解析和加载装置，所述装置包括：