[发明专利]数据处理方法、装置、介质和设备

权利要求书

1.一种数据处理方法，其特征在于，应用于数据引擎，所述方法包括：

在从源数据库发送的数据流中，识别出源库元数据；其中，所述源库元数据包括相对应的源字段标识和源字段取值类型；

在元数据数据库存储的元数据中，检索出对应所述源字段标识的基准字段取值类型；其中，所述元数据库存储有所述源数据库中数据的元数据；

在所述源字段取值类型与所述基准字段取值类型不相同的情况下，依照指定合并规则对所述源字段取值类型和所述基准字段取值类型进行归一化处理，得到目标字段取值类型；

将所述目标字段取值类型发送给所述源数据库，以用于所述源数据库基于所述目标字段取值类型修改所述源字段取值类型。

2.根据权利要求1所述的方法，其特征在于，所述数据引擎具有从所述元数据数据库读入内存的缓存数据集；在元数据数据库存储的元数据中，检索出对应所述源字段标识的基准字段取值类型的步骤，包括：

将所述源字段标识在所述缓存数据集中进行匹配运算；

在所述源字段标识未在所述缓存数据集中匹配得到基准字段取值类型的情况下，将所述源字段标识在所述元数据数据库中匹配得出所述基准字段取值类型；

将所述基准字段取值类型加入所述缓存数据集中。

3.根据权利要求1所述的方法，其特征在于，在所述源字段取值类型与所述基准字段取值类型不相同的情况下，依照指定合并规则对所述源字段取值类型和所述基准字段取值类型进行归一化处理，得到目标字段取值类型的步骤，包括：

根据所述源字段标识在合并规则集中匹配，得出对应所述源字段标识的源字段合并规则子集；其中，所述合并规则集中包括多个源字段标识对应的源字段合并规则子集；所述源字段合并规则子集中包括源字段标识对应的多个合并规则；

根据所述源字段取值类型与所述基准字段取值类型在所述源字段合并规则子集中匹配，得到所述指定合并规则。

4.根据权利要求1所述的方法，其特征在于，所述源库元数据还包括用户标识；其中，用户标识表征用户账户，所述源字段取值类型与所述基准字段取值类型不相同的情况下，依照指定合并规则对所述源字段取值类型和所述基准字段取值类型进行归一化处理，得到目标字段取值类型的步骤，包括：

根据所述用户标识在用户合并规则集中匹配，得出对应于所述用户标识的用户合并子集；其中，所述合并规则集中包括多少用户标识对应的用户合并规则子集；其中，所述用户规则子集中包括用户标识对应的多个合并规则；

根据所述源字段取值类型与所述基准字段取值类型在所述用户合并规则子集中匹配，得到所述指定合并规则。

5.根据权利要求1所述的方法，其特征在于，所述指定合并规则包括：将字符类型和非字符类型合并为字符类型，在所述源字段取值类型与所述基准字段取值类型不相同的情况下，依照指定合并规则对所述源字段取值类型和所述基准字段取值类型进行归一化处理，得到目标字段取值类型的步骤，包括：

在所述源字段取值类型和所述基准字段取值类型中一个为字符类型的情况下，根据所述指定合并规则对所述源字段取值类型和所述基准字段取值类型进行归一化处理，得到所述目标字段的取值类型为所述字符类型。

6.根据权利要求5所述的方法，其特征在于，所述非字符类型为整数类型；所述指定合并规则包括：将字符类型和整数类型合并为字符类型，在所述源字段取值类型和所述基准字段取值类型中一个为字符类型的情况下，根据所述指定合并规则对所述源字段取值类型和所述基准字段取值类型进行归一化处理，得到所述目标字段的取值类型为所述字符类型的步骤，包括：

在所述源字段取值类型和所述基准字段取值类型中一个为字符类型，一个为整数类型的情况下，根据所述指定合并规则对所述源字段取值类型和所述基准字段取值类型进行归一化处理，得到所述目标字段的取值类型为所述字符类型。