[发明专利]分布式关系型数据库的数据同步方法和装置

说明书

本发明提供一种分布式关系型数据库的数据同步方法和装置，通过确定事务操作请求所要操作的数据所在的数据分片是否为迁移状态；当数据分片为迁移状态，将数据分片地址重定向到数据分片的缓存地址，数据分片在缓存中被分为N个小分区，确定事务操作请求所要操作的数据是否为已迁移的小分区对应的数据，若为已迁移的小分区对应的数据，则在重做日志中记录事务操作的记录，由于重做日志中只记录对已迁移的小分区的事务操作，不记录对未迁移的小分区的事务操作，因此，减少了重做日志中记录的数量，节省了日志存储空间，从而，不会造成数据丢失，保证数据的完整性，以及数据同步的一致性。

技术领域

本发明涉及数据库技术，尤其涉及一种分布式关系型数据库的数据同步方法和装置。

背景技术

分布式关系型数据库(DataBase，简称：DB)，因其采用廉价的设备堆叠成具备高可用性和高扩展性的计算集群得到广泛应用。

数据同步是指将一个数据库节点的数据迁移到另一个数据库节点，分布式关系型数据库在数据迁移的过程中，需要一定的时间，在数据迁移过程中，业务面可能会对原数据库节点进行增、删、改等操作，有可能导致数据不一致，因此，为了保证数据完全同步，现有技术中，首先将原数据库节点的数据文件拷贝到新数据库节点中，依照原数据库节点的日志文件，对新数据库节点重做数据同步开始时间点后的所有事务操作，从而，保证新数据库节点中数据与原数据库节点中保持一致。

然而，现有技术中，当数据同步时间过长，事务提交频繁的时候，记录事务操作的日志文件会呈现批量增长，而数据库节点的日志文件的存储空间有限，一般采取“环形存储”的方式，日志文件大小超过存储空间大小时，会覆盖最早的日志文件，导致数据丢失。

发明内容

本发明提供一种分布式关系型数据库的数据同步方法和装置，以保证数据的完整性。

本发明第一方面提供一种分布式关系型数据库的数据同步方法，包括：

接收客户端发送的事务操作请求，确定所述事务操作请求所要操作的数据所在的数据分片是否为迁移状态；

若所述数据分片为迁移状态，将所述数据分片地址重定向到所述数据分片的缓存地址，所述数据分片在缓存中被分为N个小分区，所述N个小分区被标识为已迁移的小分区和未迁移的小分区，所述N为大于等于2的整数；

确定所述事务操作请求所要操作的数据是否为已迁移的小分区对应的数据，若为已迁移的小分区对应的数据，则在重做日志中记录所述事务操作的记录。

进一步地，当缓存中的数据分片的所有小分区均已迁移之后，所述方法还包括：

将所述重做日志中同一地址中的所有事务操作的记录中除最后一次的事务操作的记录之外的其他事务操作的记录删除。

进一步地，所述方法还包括：

通过游标位置标识已迁移的小分区和未迁移的小分区，所述游标位置之前的小分区为已迁移的小分区，所述游标位置指向的小分区和所述游标位置之后的小分区为未迁移的小分区。

进一步地，所述方法还包括：

当小分区开始迁移之后，在数据分片状态信息表中将所述小分区对应的状态信息标识为已迁移。

进一步地，所述接收客户端发送的事务操作请求，确定所述事务操作请求所要操作的数据所在的数据分片是否为迁移状态之前，还包括：

将所述数据分片复制到缓存中，在所述缓存中将所述数据分片均匀切分为所述N个小分区。

本发明第二方面提供一种分布式关系型数据库的数据同步装置，包括：

接收模块，用于接收客户端发送的事务操作请求，确定所述事务操作请求所要操作的数据所在的数据分片是否为迁移状态；