[发明专利]数据同步方法、数据同步装置及分布式系统

说明书

本发明公开了一种数据同步方法、数据同步装置及分布式系统，管理节点获取指示对所述第一数据中心和所述第二数据中心的路由信息进行更新的路由更新消息，其中，所述路由信息中至少包含所述第一数据中心和所述第二数据中心的标识信息以及所述第一数据中心和所述第二数据中心中各节点的备份路由信息；所述管理节点根据所述路由更新消息，调整所述第一数据中心和所述第二数据中心的路由信息；所述管理节点将调整后的所述第一数据中心和所述第二数据中心的路由信息同步到所述第一数据中心和所述第二数据中心中，以使所述第一数据中心和所述第二数据中心基于所述调整后的路由信息，对管辖的各个节点的数据进行同步传输。

技术领域

本发明涉及数据存储领域，具体涉及一种数据同步方法、数据同步装置及分布式系统。

背景技术

随着大数据技术的发展，为了有效解决数据集中带来的风险和访问延时的问题，通常是基于分布式系统来构建包括服务数据中心和备份数据中心的多数据中心，并实时确认所述多数据中心中的每一个数据中心及其数据中心内部的服务器的运行状况，以服务数据中心为例，在某个服务数据中心不能正常运行时，基于就近原则将后续用户的访问导向另一个正常运行的服务数据中心；以及在某个服务数据中心的一个服务器不能正常运行时，同样基于就近原则将后续用户的访问导向该服务数据中心的另一服务器中，然而在多数据中心情况下，为了能够容灾和就近访问的需要，对于备份数据中心按照一致性性要求同步来自服务数据中心的数据，必然导致服务数据中心和备份数据中心之间的信息进行交互，一旦所述多数据中心的交互的信息很多时，必然会导致数据中心之间的封闭性变差，从而降低了各个数据中心之间的独立性，若通过转发的方式来保证数据中心之间的封闭性时，由于转发节点需要转发所述多数据中心的所有的同步数据，而所述转发节点的转发效率是具有瓶颈的，必然会出现瓶颈效应，从而导致所述多数据中心的同步数据的传输也会出现瓶颈效应。

其中，在分布式系统中，通常使用一致性哈希（hash）环实现对数据的分片存储和分片查询，按照所述一致性hash环包含的多段range（连续的取值范围）来实现分片，以一个数据中心为例，具体如图1所示，该数据中心包含节点11、节点12、节点13和节点14这四个节点，其中的每一个节点由一个或多个服务器组成，一致性hash环10的取值范围为0-2^128，其中，节点11映射在一致性hash环10上的A位置，节点12映射在一致性hash环10上的B位置，节点13映射在一致性hash环10上的C位置，节点14映射在一致性hash环10上的D位置，使得节点11映射的一段range为[D，A），节点12映射的一段range为[A，B），节点13映射的一段range为[B，C）和节点14映射的一段range为[C，D），而且所述四个节点中的每一个节点的数据均在至少一个另一节点中进行备份，例如节点11中的数据备份在节点12中，也可以在节点12、节点13和节点13的每一个节点中都进行备份，使得在一个节点不能正常运行时，防止数据出现丢失的情况。

现有技术中提出通过中转节点来实现多数据中心中的数据同步和基于同一DHT（DistributedHashTable，分布式哈希）环来实现多数据中心中的数据同步，其中，Oracle的Data Guard以及mysql数据库都是通过数据中心之间构建中转节点群来实现多数据中心中的数据同步，使得所述多数据中心中的所有的数据传输都需要通过所述中转节点群来进行传输，但是随着用户终端的数量增加的越来越多，使得需要所述中转节点群来中转的数据量也越来越大，必然导致所述中转节点群出现瓶颈效应。