[发明专利]集群数据同步方法及装置

说明书

技术领域

本发明涉及数据库领域，特别涉及一种集群数据同步方法及装置。

背景技术

MySQL是一个关系型数据库管理系统，Galera Cluster(集群)是一套基于同步复制的多主MySQL集群解决方案。该集群中的节点通过同步实时更新，实现所有节点里的数据一致性。当有节点加入Galera Cluster的时候目前有两种同步方式，一种是IST(Incremental State Transfer，增量同步方式)，其特点是轻量和快速，另一种是SST，即State Snapshot Transfer，SST是全量同步方式，即同步全部数据，其特点是数据量大和缓慢。

当节点加入Galera Cluster时，会先判断该节点的seqno(Sequence Number，事务序列号)是否存在于Galera Cluster的GCache文件中，若在Galera Cluster的GCache文件中存在该seqno则开启IST，将集群中的数据同步到此节点，如果不存在则开启SST，将Galera Cluster中所有的数据全量同步到此节点。

当新加入的节点与Galera Cluster数据相差并不是很多，但GCache(集群缓存文件)文件中又没有相应的seqno时，则只能通过SST方式进行全量同步，不仅同步时间会较长，而且会产生阻塞，最终会影响Galera Cluster正常运行。

因此，如果加入Galera Cluster中的目标节点，在GCache文件中没有该目标节点的事务序列号seqno的时候，即使该目标节点中只落后了一部分数据，也只能进行全量同步，由于全量同步的数据量较大，导致该目标节点在集群数据同步所需的时间会比较多。

发明内容

为了解决相关技术中存在的集群数据同步时耗时较多的问题，本发明提供了一种集群数据同步方法及装置。

一种集群数据同步方法，所述方法包括：

获取目标节点的事务序列号；

在所述目标集群的数据日志文件中获取所述事务序列号关联的数据位置；

根据所述数据日志文件中的数据位置，将所述数据日志文件中从所述数据位置开始的数据导入所述目标节点；

响应所述数据的导入，将所述目标节点加入所述目标集群。

一种集群数据同步装置，所述装置包括：

事务序列号获取模块，用于获取目标节点的事务序列号；

数据位置获取模块，用于在所述目标集群的数据日志文件中获取所述事务序列号关联的数据位置；

数据导入模块，用于根据所述数据日志文件中的数据位置，将所述数据日志文件中从所述数据位置开始的数据导入所述目标节点；

集群加入模块，用于响应所述数据的导入，将所述目标节点加入所述目标集群。

本发明的实施例提供的技术方案可以包括以下有益效果：

本发明通过获取目标节点的事务序列号，在目标集群的数据日志文件中获取该事务序列号关联的数据位置，根据该数据日志文件中的数据位置，将该数据日志文件中从该数据位置开始的数据导入目标节点，并响应所述数据的导入将数据导入完成后，将该目标节点加入该目标集群。通过事务序列号在目标集群的数据日志文件中获取该事务序列号关联的数据位置，并依据该数据位置，将数据导入该目标节点，最后将目标节点加入到目标集群，实现数据的增量同步，从而有效减少了数据同步所需的时间。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并于说明书一起用于解释本发明的原理。

图1是根据本发明所涉及的实施环境的示意图；

图2是根据一示例性实施例示出的一种集群数据同步方法的流程图；

图3是根据图2对应实施例示出的对步骤S210的细节进行描述的流程图；

图4是根据图2对应实施例示出的对步骤S230的细节进行描述的流程图；

图5是根据图2对应实施例示出的对步骤S250的细节进行描述的流程图；

图6是根据一示例性实施例示出的一种集群数据同步装置的框图；

图7是根据图6对应实施例示出的对事务序列号获取模块的细节进行描述的框图；

图8是根据图6对应实施例示出的对数据位置获取模块的细节进行描述的框图；

图9是根据图6对应实施例示出的对数据导入模块的细节进行描述的框图。

具体实施方式