[发明专利]基于kettle的数据同步方法、装置及相关设备

权利要求书

1.一种基于kettle的数据同步方法，其特征在于，所述方法包括：

获取源数据库的源数据；

判断所述源数据是否加工完成，若所述源数据加工完成，则判断是否有需要同步的数据；

若有需要同步的数据，则通过kettle同步所述需要同步的数据到目标数据库；

若所述源数据未加工完成，则循环等待所述源数据加工完成。

2.根据权利要求1所述的基于kettle的数据同步方法，其特征在于，所述获取源数据库的源数据包括：

通过源数据库提供的数据接口从所述源数据库中获取所述源数据。

3.根据权利要求1所述的基于kettle的数据同步方法，其特征在于，所述判断所述源数据是否加工完成包括：所述方法包括:

获取加工日志表；

从所述加工日志表中读取所述源数据的加工状态；

根据所述加工状态判断所述源数据是否加工完成。

4.根据权利要求3所述的基于kettle的数据同步方法，其特征在于，所述若所述源数据加工完成，则判断是否有需要同步的数据包括:

获取数据同步标识；

根据所述数据同步标识判断是否有需要同步的数据；

若所述数据同步标识显示有需要同步的数据，则确定需要同步的数据。

5.根据权利要求1所述的基于kettle的数据同步方法，其特征在于，所述若有需要同步的数据，则通过kettle同步所述需要同步的数据到目标数据库包括：

若有需要同步的数据，则增量同步所述需要同步的数据到目标数据库。

6.根据权利要求5所述的基于kettle的数据同步方法，其特征在于，在同步数据到目标数据库之前，所述方法包括：

获取待同步的数据库中的数据；

将所述数据转换为键值对；

将所述键值对输入目标数据库，按目标数据库的数据格式将待同步的数据进行转换。

7.根据权利要求1所述的基于kettle的数据同步方法，其特征在于，所述方法还包括：

若循环等待数据加工超过预先设定的等待时间阈值，则结束等待。

8.一种基于kettle的数据同步装置，其特征在于，包括：

获取模块，用于获取源数据库的源数据；

判断模块，用于判断所述源数据是否加工完成，若所述源数据加工完成，则判断是否有需要同步的数据；

同步模块，用于若有需要同步的数据，则通过kettle同步所述需要同步的数据到目标数据库；

循环等待模块，用于若所述源数据未加工完成，则循环等待所述源数据加工完成。

9.一种计算机设备，其特征在于，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机可读指令，所述计算机可读指令被所述至少一个处理器执行时，使得所述至少一个处理器执行如权利要求1至7中任一项所述的基于kettle的数据同步方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机可读指令，所述计算机可读指令被至少一个处理器执行时实现如权利要求1至7中任一项权利要求所述的基于kettle的数据同步方法。