[发明专利]一种分布式存储节点的数据同步方法及相关装置

说明书

本申请公开了一种分布式存储节点的数据同步方法，包括：分布式节点获取分布式存储集群中的数据同步日志；根据数据同步日志确定待同步数据的源节点；从源节点对待同步数据进行数据同步操作。通过在数据同步的过程中，获取到集群中的数据同步日志，进而通过数据同步日志确定到待同步数据的源节点，然后从该源节点中对待同步数据进行数据同步操作，可见，是直接从源头，也就是源节点进行数据同步操作，只采用一次数据同步操作就保证了数据的完整性和准确性，降低了数据同步占用的网络带宽，提高了网络性能的利用率。本申请还公开了一种分布式存储节点的数据同步装置、服务器以及计算机可读存储介质，具有以上有益效果。

技术领域

本申请涉及计算机技术领域，特别涉及一种分布式存储节点的数据同步方法、数据同步装置、服务器以及计算机可读存储介质。

背景技术

随着信息技术的不断发展，出现了分布式存储系统，以便采用更好的存储硬件的设施对数据进行存储。

但是，当存在多个分布式存储节点时，不同的节点之间进行数据同步操作，有可能出现不同分布式节点的同步冗余，也就是将已经存在于其他节点中的数据，再从原始的节点中进行同步，导致重复同步的操作，占用了过多的网络带宽，增加了性能浪费。

现有技术中，通常在不同的集群或不同节点中同步相同的数据，以便提高该数据进行存储的安全性和可靠性。目前常用的同步方法是某一个集群或某一个节点接收到数据，然后其他集群从该集群或该节点中获取该数据。但是，通常数据同步的速度不一致，滞后的集群或节点为了保证同步数据的完整性和正确性，通常会向所有存在该数据的集群或节点拉取数据。虽然保证了数据的完整性和正确性，但是会占用大量的网络带宽，降低了网络性能的利用率。

因此，如何降低分布式存储节点在同步过程中的带宽浪费，提高性能利用率是本领域技术人员关注的重点问题。

发明内容

本申请的目的是提供一种分布式存储节点的数据同步方法、数据同步装置、服务器以及计算机可读存储介质，通过在数据同步的过程中从源节点获取到数据，避免从多个节点中拉取同步数据，减少占用的网络带宽。

为解决上述技术问题，本申请提供一种分布式存储节点的数据同步方法，包括：

分布式节点获取分布式存储集群中的数据同步日志；

根据所述数据同步日志确定待同步数据的源节点；

从所述源节点对所述待同步数据进行数据同步操作。

可选的，根据所述数据同步日志确定待同步数据的源节点，包括：

从所述数据同步日志中筛选出包括所述待同步数据的日志记录；

将所有所述日志记录按照数据传输顺序进行连接，得到数据流向；

将所述数据流向的开始节点作为所述源节点。

可选的，根据所述数据同步日志确定待同步数据的源节点，包括：

从所述数据同步日志中筛选出包括所述待同步数据的日志记录；

从所有所述日志记录中筛选时间最早的日志记录，将该日志记录对应的节点作为所述源节点。

可选的，从所述源节点对所述待同步数据进行数据同步操作，包括：

当下次向所述源节点进行数据同步时，从所述源节点对所述待同步数据进行数据同步操作。

本申请还提供一种分布式存储节点的数据同步装置，包括：

同步日志获取模块，用于获取分布式存储集群中的数据同步日志；

目标节点查找模块，用于根据所述数据同步日志确定待同步数据的源节点；