[发明专利]结构化数据的批处理对象生成、批处理方法和装置

权利要求书

1.一种结构化数据的批处理对象生成方法，其特征在于，包括：

获取各个结构化数据的第二级数据结构和第三级数据结构；其中，所述第二级数据结构记录相应结构化数据中表级别的关联规则，包括关联方式、关联规则和预处理逻辑；所述第三级数据结构记录相应结构化数据中字段级的映射规则，包括映射规则和依赖表名；

对所述各个结构化数据的第二级数据结构和第三级数据结构进行解析，生成相应结构化数据携带的执行规则；所述执行规则包括直接映射、分词、去重、计数、去重计数、排序、取第一条、取最后一条和/或排除；

根据各个结构化数据携带的执行规则对各个结构化数据执行操作，以更新各个结构化数据的第二级数据结构和第三级数据结构，得到第二级数据结构对应的第一更新数据结构和第三级数据结构对应的第二更新数据结构；

根据各个结构化数据的第一更新数据结构和第二更新数据结构确定各个结构化数据中各组单元数据的独立业务逻辑，根据各个独立业务逻辑生成各组单元数据的查询程序；

根据各组单元数据所在表的依赖关系将各个结构化数据的各个查询程序转换为批处理对象。

2.根据权利要求1所述的方法，其特征在于，所述获取各个结构化数据的第二级数据结构和第三级数据结构包括：

获取各个结构化数据的第一级数据结构；其中，所述第一级数据结构记录相应结构化数据中各个表和/或各个字段的对照关系；

从各个结构化数据的第一级数据结构中读取各个结构化数据的第二级数据结构和第三级数据结构。

3.根据权利要求1所述的方法，其特征在于，所述根据各个结构化数据携带的执行规则对各个结构化数据执行操作，以更新各个结构化数据的第二级数据结构和第三级数据结构包括：

根据各个结构化数据的第二级数据结构和第三级数据结构解析各个结构化数据携带的执行规则；

根据各个执行规则对各个结构化数据执行操作，以更新各个结构化数据的第二级数据结构和第三级数据结构。

4.根据权利要求1所述的方法，其特征在于，所述根据各个结构化数据的第一更新数据结构和第二更新数据结构确定各个结构化数据中各组单元数据的独立业务逻辑，根据各个独立业务逻辑生成各组单元数据的查询程序包括：

根据各个结构化数据的第一更新数据结构和第二更新数据结构获取各个结构化数据的表级映射关系，根据各个表级映射关系生成各个结构化数据的From段语句；

识别各个结构化数据中的各组单元数据，确定各组单元数据的计算次序，根据所述From段语句确定第一组单元数据的执行脚本，得到第一执行脚本，根据第一执行脚本依次计算其他各组单元数据的执行脚本，根据各个执行脚本确定查询程序；其中，第一组单元数据为计算次序为1的一组单元数据，其他各组单元数据为除第一组单元数据之外的各组单元数据。

5.根据权利要求4所述的方法，其特征在于，所述根据各个结构化数据的第一更新数据结构和第二更新数据结构获取各个结构化数据的表级映射关系，根据各个表级映射关系生成各个结构化数据的From段语句包括：

根据各个结构化数据的第一更新数据结构和第二更新数据确定各个结构化数据的主表、从表、主表与从表之间的关联关系、主表与从表之间的关联条件以及子查询逻辑；

对各个结构化数据的主表、从表、主表与从表之间的关联关系、以及主表与从表之间的关联条件执行子查询逻辑对应的逻辑操作，得到各个结构化数据的From段语句。