[发明专利]数据导入中台的方法、装置、系统、电子设备、存储介质

权利要求书

1.一种数据导入中台的方法，其特征在于，包括：

根据用户的类型向其分配相应的异构数据源中数据库的访问权限，以使得所述用户基于所述访问权限访问所述数据库并对所述数据库中的数据输入梳理操作；

接收所述梳理操作，根据所述梳理操作对所述数据进行梳理；

将梳理后的数据导入中台。

2.如权利要求1所述的数据导入中台的方法，其特征在于，所述数据库的连接插入到预先创建的连接池内，以使得所述用户通过所述连接池访问所述数据库。

3.如权利要求1所述的数据导入中台的方法，其特征在于，所述根据所述梳理操作对所述数据进行梳理，包括：

根据所述梳理操作选取待梳理的数据库；

选取所述待梳理的数据库中符合要求的数据表；

选取所述数据表中符合要求的字段；

对所述字段进行分析，根据分析结果确定所述字段导入中台的方式；导入方式包括全量导入和增量导入。

4.如权利要求3所述的数据导入中台的方法，其特征在于，在对所述字段进行分析，根据分析结果确定所述字段导入中台的方式之后，还包括对所述字段进行校验的步骤，检验方式包括文本类型校验和数值类型校验，所述文本类型校验用于表征对字段的文本进行校验，所述数值类型校验用于表征对字段的数值进行校验。

5.如权利要求4所述的数据导入中台的方法，其特征在于，所述文本类型校验包括通用文本类校验和复杂文本类校验，所述通用文本类校验表征按照预先导入的校验规则对所述字段进行校验；所述复杂文本类校验表征在预先导入的校验规则的基础上添加规则对所述字段进行校验。

6.如权利要求5所述的数据导入中台的方法，其特征在于，所述在预先导入的校验规则的基础上添加规则，包括：

获取用户添加的与梳理向导相匹配的规则；

编辑规则信息并生成规则代码；所述规则信息包括以下至少之一：校验规则名称、校验类型、校验长度和校验限定；

解析所述规则代码，并将解析结果插入预先导入的校验规则内。

7.如权利要求5所述的数据导入中台的方法，其特征在于，所述数值类型校验包括统计校验和运算校验；所述统计校验包括最大最小值校验、历史数据求和校验和均值校验中的至少一项；所述运算校验包括算术运算校验、范围校验和逻辑校验中的至少一项。

8.如权利要求5～8中任意一项所述的数据导入中台的方法，其特征在于，所述方法还包括：在校验结束后返回校验日志并确定校验结果是否存在错误，当所述校验结果存在错误时在所述校验日志中定位错误位置并进行修正。

9.如权利要求1所述的数据导入中台的方法，其特征在于，所述方法还包括：在根据所述梳理操作对所述数据进行梳理之后，将梳理后的数据对应地插入到表级别信息表和字段级别信息表内。

10.如权利要求9所述的数据导入中台的方法，其特征在于，在对所述字段进行分析，根据分析结果确定所述字段导入中台的方式之后，还包括以下至少之一的步骤：设定所述表级别信息表的生命周期、确定是否对所述表级别信息表进行分区、确定所述表级别信息表导入中台的优先级。

11.如权利要求9所述的数据导入中台的方法，其特征在于，所述将梳理后的数据导入中台，包括：

生成用于将梳理后的数据导入中台的导入代码；

执行所述导入代码。