[发明专利]结构化数据的批处理对象生成、批处理方法和装置

说明书

本申请涉及一种结构化数据的批处理对象生成、批处理方法、装置、批处理终端和存储介质。上述结构化数据的批处理方法获取各个结构化数据的第二级数据结构和记录字段级映射规则的第三级数据结构，更新得到第二级数据结构对应的第一更新数据结构和第三级数据结构对应的第二更新数据结构，使相应批处理终端便根据第一更新数据结构和第二更新数据结构确定结构化数据的独立业务逻辑，生成各组单元数据的查询程序，各组单元数据所在表的依赖关系将各个结构化数据的各个查询程序转换为批处理对象，以快速获得批处理对象，将批处理对象写入批处理程序文件，运行上述批处理程序文件，实现批处理，可以简化结构化数据的批处理流程，提高批处理效率。

技术领域

本申请涉及数据结构处理技术领域，特别是涉及一种结构化数据的批处理对象生成、批处理方法、装置、批处理终端和计算机可读存储介质。

背景技术

金融数据等需要依赖相关程序处理的数据通常以代码、伪代码和/或描述性文件(如excel表格)等结构化数据的形式存在，这些结构化数据往往具有口径复杂和加工路径长的特征，在实际项目实施中，使用SQL(Structured Query Language，结构化查询语言)脚本进行数据批处理程序的开发时，会产生不同开发人员实现方式不同的情况，这样便使对结构化数据进行结构化映射时，文件填写复杂,语法接近程序编码,难以支持批量脚本处理。传统方案往往需要分别对其中涉及的各个结构化数据进行解析，再基于解析得到的文件结构拼装得到SQL批处理脚本，以实现对大量结构化数据的处理。可见，在需要对大量结构化数据进行处理时，传统方案存在处理效率低的问题。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提高批处理效率的结构化数据的批处理对象生成、批处理方法、装置、批处理终端和计算机可读存储介质。

一种结构化数据的批处理对象生成方法，所述方法包括：

获取各个结构化数据的第二级数据结构和第三级数据结构；其中，所述第二级数据结构记录相应结构化数据中表级别的关联规则；所述第三级数据结构记录相应结构化数据中字段级的映射规则；

根据各个结构化数据携带的执行规则对各个结构化数据执行操作，以更新各个结构化数据的第二级数据结构和第三级数据结构，得到第二级数据结构对应的第一更新数据结构和第三级数据结构对应的第二更新数据结构；

根据各个结构化数据的第一更新数据结构和第二更新数据结构确定各个结构化数据中各组单元数据的独立业务逻辑，根据各个独立业务逻辑生成各组单元数据的查询程序；

根据各组单元数据所在表的依赖关系将各个结构化数据的各个查询程序转换为批处理对象。

在其中一个实施例中，所述获取各个结构化数据的第二级数据结构和第三级数据结构包括：

获取各个结构化数据的第一级数据结构；其中，所述第一级数据结构记录相应结构化数据中各个表和/或各个字段的对照关系；

从各个结构化数据的第一级数据结构中读取各个结构化数据的第二级数据结构和第三级数据结构。

在其中一个实施例中，所述根据各个结构化数据携带的执行规则对各个结构化数据执行操作，以更新各个结构化数据的第二级数据结构和第三级数据结构包括：

根据各个结构化数据的第二级数据结构和第三级数据结构解析各个结构化数据携带的执行规则；

根据各个执行规则对各个结构化数据执行操作，以更新各个结构化数据的第二级数据结构和第三级数据结构。

在其中一个实施例中，所述根据各个结构化数据的第一更新数据结构和第二更新数据结构确定各个结构化数据中各组单元数据的独立业务逻辑，根据各个独立业务逻辑生成各组单元数据的查询程序包括：