[发明专利]一种数据备份方法及装置

说明书

技术领域

本发明涉及数据存储技术领域，特别是涉及一种数据备份方法及装置。

背景技术

近年来，磁盘备份设备的容量已经趋于饱和，在数据中心已经没有足够的空间来备份PT级的数据。在这种情况下，当希望将备份数据保存一个月时，却只能保存两到三天。

我们发现备份设备中总是充斥着大量的冗余数据，因此为了节省更多空间，重复删除技术便顺理成章成为人们所关注的焦点。通过对备份数据中的重复数据进行删除，能够大比例缩减需要存储的数据量，从而让出更多的备份空间，不仅可以使磁盘上的备份数据保存更长的时间，减少了数据中心的消耗，降低了成本，而且还可以节约离线存储时所需的大量的带宽。

存在于数据重复删除中较大的风险是来自硬件故障的灾难性的数据损失，这是由于任何特定的备份工作的数据被切成块，分散在整个重复数据删除设备中。如果在重复删除设备中损失了一个RAID设置，就会损失很多数据。

因此，提供一种数据备份方法及装置，来对唯一数据进行保护是非常有必要的。

发明内容

本发明的目的是提供一种数据备份方法及装置，目的在于提高重复数据删除应用中对唯一数据的保护。

为解决上述技术问题，本发明提供一种数据备份方法，包括：

将数据文件分割成一组数据块，为所述数据块计算数据指纹；

通过所述数据指纹判断所述数据块是否为与已存储的数据块所重复的重复数据块；

如果是，则将标识所述重复数据块存储位置的指针信息进行存储；如果否，则将所述数据块存储于第一数据存储池中；

将存储于所述第一数据存储池中的数据备份至第二数据存储池中，所述第二数据存储池与所述第一数据存储池互为镜像。

可选地，所述将数据文件分割成一组数据块包括：

按照定长分块算法或者滑动块切分的方法将所述数据文件分割成一组数据块。

可选地，所述为所述数据块计算数据指纹包括：

通过MD5或HASH算法为所述数据块计算数据指纹。

可选地，所述通过所述数据指纹判断所述数据块是否为与已存储的数据块所重复的重复数据块包括：

根据预先建立的哈希表，以所述数据指纹为关键字进行哈希查找，判断所述数据块是否为与已存储的数据块所重复的重复数据块。

可选地，所述将存储于所述第一数据存储池中的数据备份至第二数据存储池中包括：

将存储于所述第一数据存储池中的数据同步或按照预定周期异步备份至所述第二数据存储池中。

可选地，所述将存储于所述第一数据存储池中的数据备份至所述第二数据存储池中包括：

当前备份在上一次备份的时间戳上进行。

本发明还提供了一种数据备份装置，包括：

计算模块，用于将数据文件分割成一组数据块，为所述数据块计算数据指纹；

判断模块，用于通过所述数据指纹判断所述数据块是否为与已存储的数据块所重复的重复数据块；

存储模块，用于当所述数据块是重复数据块时，则将标识所述重复数据块存储位置的指针信息进行存储；当所述数据块不是重复数据块时，则将所述数据块存储于第一数据存储池中；

备份模块，用于将存储于所述第一数据存储池中的数据备份至第二数据存储池中，所述第二数据存储池与所述第一数据存储池互为镜像。

可选地，所述计算模块通过MD5或HASH算法为所述数据块计算数据指纹。

可选地，所述判断模块具体用于根据预先建立的哈希表，以所述数据指纹为关键字进行哈希查找，判断所述数据块是否为与已存储的数据块所重复的重复数据块。

可选地，所述备份模块具体用于将存储于所述第一数据存储池中的数据同步或按照预定周期异步备份至第二数据存储池中。

本发明所提供的数据备份方法及装置，通过将数据文件分割成一组数据块，计算出该数据块的数据指纹。根据该数据指纹判断其是否为重复数据块；如果是，则仅存储数据块的指针信息，如果否，则将该数据块存储在第一数据存储池上；并在另外一个物理隔离的第二数据存储池上，对该数据块进行备份。其中，第二数据存储池与第一数据存储池互为镜像，在一方故障后，可以直接切换到另外一方，从而保护了数据的安全性。可见，本发明能够有效提高重复数据删除应用中对重复删除之后的数据的保护。

附图说明

图1为本发明所提供的数据备份方法的一种具体实施方法的流程图；

图2为本发明所提供的数据备份方法的另一种具体实施方法的流程图；