[发明专利]数据同步方法、装置、系统、设备和存储介质

说明书

本发明实施例公开了一种数据同步方法、装置、系统、设备和存储介质，包括：第一节点确定集群变更后与之直接连接的第二节点，确定与第二节点直接连接的至少一个第三节点；获取第二节点和第三节点存储数据时最后上报的数据度量对应的时间戳；从时间戳中确定出时间最早的时间戳；根据时间最早的时间戳从第二节点和第三节点同步数据。各个节点以时间戳来映射存储数据的数据度量，解决了以Mysql自定义的度量只能用于Mysql的数据存储架构不具备通用性的问题，以时间戳作为数据度量，时间具有通用性，各个节点可以自定义存储方案以支持各个节点异构，外部系统可以作为一个异构点请求同步数据，提高了存储系统的通用性。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据同步方法、装置、系统、设备和存储介质。

背景技术

集群是一种计算机系统，集群将多台同构或异构的计算机软件和/或硬件连接起来高度紧密地协作完成计算工作，集群对外表现为一台虚拟主机，集群中的单个计算机称为节点，通常通过网连接。

现有集群的数据存储架构中，通常配置一个主节点作为数据写入节点，若干从节点作为读节点来向主节点读取同步数据，这种主从结构的网络拓扑结构中各个节点并不是对等的，主节点通常不变，整个架构不能做到自适应同步数据。为了实现集群中各个节点对等，采用Mysql多源复制的特性提供整个对等网络间相互同步的能力，同时通过GTID特性记录不同节点间的同步情况，在集群网络拓扑结构变更时也能够根据各节点记录的GTID作自适应的重新同步。

然而，采用Mysql多源复制结合GTID虽然能够做到自适应同步数据，但是以GTID作为各节点间同步情况的度量，是Mysql自定义的度量，只能用于Mysql，不具备通用性，难以对接外部异构系统。

发明内容

本发明实施例提供一种数据同步方法、装置、系统、设备和存储介质，以解决现有技术中集群的数据存储架构采用Mysql自定义的度量，只能用于Mysql不具备通用性，难以对接外部异构系统的问题。

第一方面，本发明实施例提供了一种数据同步方法，应用于集群中的节点，包括：

第一节点确定集群变更后与之直接连接的第二节点，所述第二节点在所述集群变更前与所述第一节点非直接连接；

确定与所述第二节点直接连接的至少一个第三节点；

获取所述第二节点和所述第三节点存储数据时最后上报的数据度量对应的时间戳，所述数据度量对应的时间戳为集群中各个节点存储数据时上报至集群管理中心的时间戳；

从所述时间戳中确定出时间最早的时间戳；

根据所述时间最早的时间戳从所述第二节点和所述第三节点同步数据。

第二方面，本发明实施例提供了一种数据同步方法，应用于集群中的集群管理中心，包括：

接收第一节点的集群信息请求；

响应所述集群信息请求获取集群信息；

将所述集群信息发送至所述第一节点，所述集群信息包括各个节点存储数据时最后上报的数据度量对应的时间戳，所述第一节点用于在集群变更后确定与之直接连接的第二节点以及与第二节点直接连接的至少一个第三节点，并从时间戳中确定出时间最早的时间戳，以根据所述时间最早的时间戳从所述第二节点和所述第三节点同步数据。

第三方面，本发明实施例提供了一种数据同步装置，应用于集群中的节点，包括：

直接连接节点确定模块，用于第一节点确定集群变更后与之直接连接的第二节点，所述第二节点在所述集群变更前与所述第一节点非直接连接；

非直接连接节点确定模块，用于确定与所述第二节点直接连接的至少一个第三节点；