[发明专利]一种数据同步方法、装置、设备及存储介质

说明书

本发明公开了一种数据同步方法、装置、设备及存储介质，该方法的步骤包括：获取集群节点中注册的节点用户数据以及大数据组件中授权的组件用户数据，集群节点与大数据组件属于相同的大数据集群；将节点用户数据以及组件用户数据进行合并得到综合用户数据；向集群节点以及大数据组件分别同步综合用户数据。本方法达到了集群节点以及所述大数据组件中用户数据相一致的目的，进而保证集群节点能够通过大数据组件处理大数据业务，从而确保了大数据集群中业务的可靠性。此外，本发明还提供一种数据同步装置、设备及存储介质，有益效果同上所述。

技术领域

本发明涉及大数据领域，特别是涉及一种数据同步方法、装置、设备及存储介质。

背景技术

在大数据时代，大量业务需要通过大数据集群完成统一处理，大数据集群中包含有集群节点以及大数据组件，当前往往根据业务需求，通过集群节点向大数据组件发起业务请求的方式实现大数据组件对相应大数据业务的处理。

随着大数据集群的逐渐完善及成熟，大数据集群中的大数据组件也越来越多，而大数据组件往往服务于大数据集群中的集群节点，进而当集群节点中注册有大数据组件授权的用户数据即可访问该大数据组件，但是由于当前集群节点与对应的大数据组件之间往往独立维护有各自的用户数据，因此可能存在集群节点与大数据组件之间的用户数据不一致的情况，进而导致集群节点无法通过大数据组件处理大数据业务，难以确保大数据集群中业务的可靠性。

由此可见，提供一种数据同步方法，以相对确保大数据集群中业务的可靠性，是本领域技术人员需要解决的问题。

发明内容

本发明的目的是提供一种数据同步方法、装置、设备及存储介质，以相对确保大数据集群中业务的可靠性。

为解决上述技术问题，本发明提供一种数据同步方法，包括：

获取集群节点中注册的节点用户数据以及大数据组件中授权的组件用户数据，集群节点与大数据组件属于相同的大数据集群；

将节点用户数据以及组件用户数据进行合并得到综合用户数据；

向集群节点以及大数据组件分别同步综合用户数据。

优选的，将节点用户数据以及组件用户数据进行合并得到综合用户数据，包括：

对节点用户数据以及组件用户数据取并集得到综合用户数据。

优选的，在向集群节点以及大数据组件分别同步综合用户数据之前，方法还包括：

判断综合用户数据中是否存在具有相同用户标识且内容存在差异的第一数据以及第二数据；

如果是，则对综合用户数据中的第一数据以及第二数据进行合并，并执行向集群节点以及大数据组件分别同步综合用户数据的步骤；

否则，执行向集群节点以及大数据组件分别同步综合用户数据的步骤。

优选的，对综合用户数据中的第一数据以及第二数据进行合并，包括：

对综合用户数据中的第一数据以及第二数据以取交集的方式进行合并。

优选的，对综合用户数据中的第一数据以及第二数据进行合并，包括：

对综合用户数据中的第一数据以及第二数据以取差集的方式进行合并。

优选的，在向集群节点以及大数据组件分别同步综合用户数据之后，方法还包括：

接收用户的操作指令，并根据操作指令对综合用户数据执行相应的数据操作；

判断执行操作指令后的综合用户数据的是否存在内容变更；

如果是，则将集群节点以及大数据组件中已有的综合用户数据替换为发生内容变更的综合用户数据。