[发明专利]分布式存储元数据的修复方法、装置及系统

说明书

本发明实施例提供分布式存储元数据的修复方法、装置及系统，能够在有节点故障的场景下及时修复故障节点上的元数据，使得后续的镜像写操作不会再产生降级写日志。方法包括：第一节点接收第二节点发送的第一消息，所述第一消息携带第一元数据，以及对第一元数据进行镜像写操作的操作请求；若第一节点上的元数据不完整，所述第一节点获取所述第一节点上缺失的元数据；所述第一节点根据获取到的缺失的元数据对所述第一节点上的元数据进行修复；在将所述第一节点上的元数据修复完整后，所述第一节点对所述第一元数据进行镜像写操作，并向所述第二节点发送第二消息，所述第二消息用于指示所述第一元数据镜像写操作成功。本发明适用于数据存储技术领域。

技术领域

本发明涉及数据存储技术领域，尤其涉及分布式存储元数据的修复方法、装置及系统。

背景技术

现有的分布式存储架构中，对元数据的可靠性要求非常高。元数据通常以镜像形式保存在不同的节点进行备份，以保证数据的可靠性。在有节点故障的场景下，元数据的镜像可靠性会降低，节点恢复正常后，其上写失败的元数据要及时的修复正确，以保证元数据的可靠性。

如何修复曾经故障节点上的元数据，常见的方式是降级写时记录要修复对象的日志，等待后台服务器获取修复日志后进行元数据的修复，进而来保证元数据的可靠性。

然而，在后台服务器把故障节点上曾经降级写的元数据修复正确之前，若再次镜像写这个故障节点上的元数据，由于该故障节点上的元数据和其它节点上的元数据不一致，因此将导致继续降级写，生成新的降级写日志。当元数据的镜像写操作频率比较高时，将生成大量的降级写日志，从而增加了后台服务器要恢复的元数据的任务量。如果降级写的日志丢失或日志还没有执行到，这时候再有其它节点发生故障，将可能导致分布式存储元数据丢失，进而丢失用户文件。

因此，如何在有节点故障的场景下及时修复故障节点上的元数据，使得后续的镜像写操作不会再产生降级写日志，成为目前亟待解决的问题。

发明内容

本发明实施例提供分布式存储元数据的修复方法、装置及系统，能够在有节点故障的场景下及时修复故障节点上的元数据，使得后续的镜像写操作不会再产生降级写日志。

为达到上述目的，本发明实施例提供如下技术方案：

第一方面，提供一种分布式存储元数据的修复方法，所述方法包括：

第一节点接收第二节点发送的第一消息，所述第一消息携带第一元数据，以及对所述第一元数据进行镜像写操作的操作请求；

若所述第一节点上的元数据不完整，所述第一节点获取所述第一节点上缺失的元数据；

所述第一节点根据获取到的缺失的元数据，对所述第一节点上的元数据进行修复；

在将所述第一节点上的元数据修复完整后，所述第一节点对所述第一元数据进行镜像写操作，并向所述第二节点发送第二消息，所述第二消息用于指示所述第一元数据镜像写操作成功。

在第一方面第一种可能的实现方式中，结合第一方面，所述第一节点获取所述第一节点上缺失的元数据，包括：

所述第一节点向所述第二节点发送第三消息，所述第三消息用于请求所述第一节点上缺失的元数据；

所述第一节点接收所述第二节点发送的第四消息，所述第四消息携带所述第一节点上缺失的元数据，从所述第四消息中获取所述第一节点上缺失的元数据。

在第一方面第二种可能的实现方式中，结合第一方面，所述第一节点获取所述第一节点上缺失的元数据，包括：

所述第一节点向元数据服务器MDS发送第三消息，所述第三消息用于请求所述第一节点上缺失的元数据；