[发明专利]数据的处理方法及装置、计算机可读存储介质、处理器

权利要求书

1.一种数据的处理方法，其特征在于，包括：

获取第一数据库和第二数据库的同步任务，其中，所述同步任务用于将所述第一数据库的目标数据同步至所述第二数据库；

根据所述同步任务进行数据配置，得到配置信息,其中，所述配置信息用于确定所述同步任务的执行策略；

根据所述配置信息从所述第一数据库获取所述目标数据；

将所述目标数据存储于中间存储介质，并将所述目标数据从所述中间存储介质同步至所述第二数据库。

2.根据权利要求1所述的数据的处理方法，其特征在于，所述配置信息包括元数据表，根据所述同步任务进行数据配置，得到配置信息，包括：

获取所述同步任务中的数据源信息和分库信息；

根据所述数据源信息和所述分库信息进行数据配置，得到所述元数据表。

3.根据权利要求1所述的数据的处理方法，其特征在于，所述配置信息包括映射表，根据所述同步任务进行数据配置，得到配置信息，包括：

获取同步任务的分步信息和数据源信息，其中，所述分步信息包含对所述目标数据处理的子任务；

根据所述分步信息和所述数据源信息进行数据配置，得到所述映射表。

4.根据权利要求3所述的数据的处理方法，其特征在于，

所述数据源信息包括所述第一数据库至所述第二数据库的同步方向、字段信息和所述目标数据的获取方式；

所述分步信息包含如下任意一项或者几项：所述目标数据的清理步骤、以及创建索引步骤、以及目标表重命名或者重建步骤。

5.根据权利要求3所述的数据的处理方法，其特征在于，在将所述目标数据从所述中间存储介质同步至所述第二数据库之后，所述方法还包括：

判断所述子任务是否执行成功；

在所述子任务全部执行成功的情况下，确定所述同步任务执行成功；

在任意一个子任务执行失败的情况下，从所述失败的子任务开始继续执行所述同步任务的子任务。

6.根据权利要求1所述的数据的处理方法，其特征在于，所述配置信息包括任务注册表，根据所述同步任务进行数据配置，得到配置信息，包括：

将所述同步任务注册到所述任务注册表中。

7.根据权利要求1所述的数据的处理方法，其特征在于，将所述目标数据存储于中间存储介质，包括：

将所述目标数据的格式进行清洗转换，得到目标数据文件；

将所述目标数据文件存储于所述中间存储介质。

8.一种数据的处理装置，其特征在于，包括：

任务获取模块，用于获取第一数据库和第二数据库的同步任务，其中，所述同步任务用于将所述第一数据库的目标数据同步至所述第二数据库；

配置模块，用于根据所述同步任务进行数据配置，得到配置信息；

数据获取模块，用于根据所述配置信息从所述第一数据库获取所述目标数据；

同步模块，用于将所述目标数据存储于中间存储介质，并将所述目标数据从所述中间存储介质同步至所述第二数据库。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的程序，其中，在所述程序运行时控制所述计算机可读存储介质所在设备执行权利要求1至7中任意一项所述数据的处理方法。

10.一种处理器，其特征在于，所述处理器用于运行程序，其中，所述程序运行时执行权利要求1至7中任意一项所述数据的处理方法。