[发明专利]重复数据删除方法、系统和介质

说明书

示例可以包括基于存储设备的磨损量的重复数据删除系统阈值。示例可以获得存储有重复数据删除系统的多个容器索引的至少一个存储设备所经历的磨损量的指示，并且可以基于所述磨损量来调整所述重复数据删除系统的阈值。

技术领域

本公开涉及重复数据删除方法、系统和介质。

背景技术

诸如主机服务器等的客户端计算设备可以将数据存储在主存储阵列中，并且可以针对存储在主存储阵列中的数据执行工作负荷。在一些示例中，出于诸如冗余和数据保护等目的，可以将存储在主存储阵列中的数据备份在与客户端计算设备和主存储阵列两者分开的备份装置中。在一些示例中，例如，备份装置可以以重复数据删除(deduplicated)的形式存储数据，使得与在主存储阵列上相比更紧凑地存储数据。

发明内容

一种重复数据删除方法，包括：获得存储有重复数据删除系统的多个容器索引的至少一个存储设备所经历的磨损量的指示，其中所述重复数据删除系统包括多个容器，每个容器包括一个或多个数据块；基于所述磨损量调整容器索引阈值；在所述多个容器索引中识别具有针对给定数据流的给定部分的命中的容器索引；从所述至少一个存储设备中取回一数量的所识别容器索引，所述数量不超过所述容器索引阈值，其中，所述容器索引阈值是要从所述至少一个存储设备读取以对任何数据流的单个部分进行重复数据删除的所识别容器索引的最大数量；以及相对于所取回的容器索引对所述给定部分执行重复数据删除。

一种重复数据删除系统，包括：至少一个处理资源；以及至少一个非暂态机器可读存储介质，所述至少一个非暂态机器可读存储介质包括指令，所述指令可由至少一个处理资源执行以进行以下操作：获得存储有所述重复数据删除系统的多个容器索引的至少一个存储设备所经历的磨损量的指示，其中所述重复数据删除系统包括多个容器，每个容器包括一个或多个数据块，所述容器索引中的每个容器索引包括一个或多个条目；基于所述磨损量调整压缩阈值；对所述容器索引中的、具有大于或等于所述压缩阈值的数量的未被引用的条目的经选择的容器索引执行压缩，其中，执行所述压缩包括在不包括所述未被引用的条目的情况下将所述经选择的容器索引写到所述至少一个存储设备上的不同位置；以及防止对具有小于所述压缩阈值的数量的未被引用的条目的任何容器索引进行压缩。

一种非暂时性机器可读存储介质，包括指令，所述指令当由重复数据删除系统的处理资源执行时，使得所述处理资源：获得存储有所述重复数据删除系统的多个容器索引的至少一个存储设备所经历的磨损量的指示，其中所述重复数据删除系统包括多个容器，每个容器包括一个或多个数据块；基于所述磨损量调整容器索引阈值；在所述多个容器索引中识别具有针对给定数据流的给定部分的命中的容器索引；从所述至少一个存储设备中取回一数量的所识别容器索引，所述数量不超过所述容器索引阈值，其中，所述容器索引阈值是要从所述至少一个存储设备读取以对任何数据流的单个部分进行重复数据删除的所识别容器索引的最大数量；以及相对于所取回的容器索引对所述给定部分执行重复数据删除。

附图说明

以下具体实施方式参考附图，其中：

图1是用于基于存储设备磨损量来调整阈值的示例重复数据删除系统的框图；

图2是包括调整容器索引阈值的示例方法的流程图；

图3是包括调整压缩阈值的示例方法的流程图；

图4是具有可调压缩阈值的示例重复数据删除系统的框图；

图5是包括设置容器索引阈值的示例方法的流程图；

图6是包括设置压缩阈值的示例方法的流程图；

图7是用于获得存储设备磨损量的指示的示例重复数据删除系统的框图；以及

图8是包括调整压缩阈值的示例方法的流程图。

具体实施方式