[发明专利]数据同步方法、装置、设备及存储介质

权利要求书

1.一种数据同步方法，其特征在于，所述方法包括：

从目标数据库中获取全量数据，并将所述全量数据划分为多个具有不同数据类型的目标数据集；

对于每个所述目标数据集，获取所述目标数据集对应的目标历史数据集，并根据所述目标数据集和所述目标历史数据集，检测所述目标数据集中是否存在更新数据；

若所述目标数据集中存在所述更新数据，则将所述更新数据发送至同步服务器，所述更新数据用于所述同步服务器对存储的历史数据进行数据同步。

2.根据权利要求1所述的方法，其特征在于，所述目标数据集中包括至少一个目标待检测数据，所述根据所述目标数据集和所述目标历史数据集，检测所述目标数据集中是否存在更新数据，包括：

对所述目标待检测数据进行哈希处理，得到所述目标待检测数据对应的目标哈希值；

根据所述目标哈希值和所述目标历史数据集，检测所述目标数据集中是否存在更新数据。

3.根据权利要求2所述的方法，其特征在于，所述目标历史数据集至少包括所述目标待检测数据对应的历史哈希值，所述根据所述目标哈希值和所述目标历史数据集，检测所述目标数据集中是否存在更新数据，包括：

检测所述目标哈希值和所述历史哈希值是否相同；

若所述目标哈希值和所述历史哈希值不同，则确定所述目标数据集中存在所述更新数据。

4.根据权利要求2所述的方法，其特征在于，所述方法还包括：

将所述目标数据集中的所述待检测数据以预设数据表的格式进行存储。

5.根据权利要求1所述的方法，其特征在于，所述全量数据包括多个待检测数据和各所述待检测数据对应的数据类型标识，所述将所述全量数据划分为多个具有不同数据类型的目标数据集，包括：

根据各所述待检测数据对应的所述数据类型标识，将所述全量数据划分为多个具有不同数据类型的所述目标数据集。

6.根据权利要求1所述的方法，其特征在于，所述目标数据集中包括至少一个目标待检测数据和所述目标待检测数据对应的目标数据类型标识，所述获取所述目标数据集对应的历史数据集，包括：

根据所述目标数据类型标识，查找所述目标数据类型标识对应的历史数据集，得到所述目标历史数据集，所述目标历史数据集为在历史时刻下，对所述目标数据库中的全量数据按照数据类型划分得到的，所述目标数据集和所述目标历史数据集的数据类型相同。

7.根据权利要求1所述的方法，其特征在于，所述将所述全量数据划分为多个具有不同数据类型的目标数据集之后，还包括：

将各所述目标数据集对应存储至分布式文件系统中的相应目录下。

8.根据权利要求1所述的方法，其特征在于，所述从目标数据库中获取全量数据之前，所述方法还包括：

若检测到同步触发事件，则检测所述同步触发事件是否为预设时间段内的首个同步触发事件；

若所述同步触发事件是预设时间段内的首个同步触发事件，则将所述全量数据发送至所述同步服务器；

若所述同步触发事件不是预设时间段内的首个同步触发事件，则执行所述从目标数据库中获取全量数据的步骤。

9.一种数据同步方法，其特征在于，所述方法包括：

接收源服务器发送的更新数据，所述更新数据包括数据位置信息和数据内容信息；

根据所述数据位置信息指示的数据位置，利用所述数据内容信息对存储的历史数据进行数据同步。

10.根据权利要求9所述的方法，其特征在于，所述根据所述数据位置信息指示的数据位置，利用所述数据内容信息对存储的历史数据进行数据同步，包括：

根据所述数据位置信息指示的数据位置，将所述数据内容信息添加至所述历史数据的相应位置中。