[发明专利]一种基于源数据重删的备份方法、装置、及存储介质

说明书

技术领域

本发明涉及数据处理技术领域，特别是涉及一种基于源数据重删的备份方法、装置、及存储介质。

背景技术

数据是信息化系统的核心，社会经济对信息化的依赖程度越来越高，信息系统中的关键业务数据是用户最重要的资产，数据的可靠性、完整性和安全性，关系到重要行业和企业的生存力和竞争力，关系到国家信息安全和国民经济稳定发展。目前企业对数据量不断增长的需求使得存储系统面临严峻的挑战，研究发现，存储系统中高达60％的数据是冗余的。

为了克服该问题，现有技术中通常都是在系统后端进行冗余数据的重删，即在数据从源端传输至后端的存储系统后进行数据的重删工作。

该方式一方面造成源端至后端的传输网络的传输压力过大，另一方面对于存储系统的空间也有较高的要求。由此可见，在源端和后端的数据传输过程中，如何降低传输网络的传输压力以及降低存储系统的存储量是本领域技术人员亟待解决的问题。

发明内容

本发明的目的是提供一种基于源数据重删的备份方法、装置、及计算机可读存储介质，用于在源端和后端的数据传输过程中，降低传输网络的传输压力以及降低存储系统的存储量。

为解决上述技术问题，本发明提供一种基于源数据重删的备份方法，包括：

接收客户端发送的源数据，并按照预先设定的数据块标识规则判断所述源数据对应的各数据块中是否存在新的数据块；

如果是，则将所述源数据对应的全部所述数据块发送至后端存储系统以进行数据备份。

优选地，所述按照预先设定的数据块标识规则判断所述源数据对应的各数据块中是否存在新的数据块具体包括：

预先与所述客户端设定所述数据块标识规则；

将所述源数据对应的全部所述数据块存储至数据库中；

提取各所述数据块的数据块标识；

判断各所述数据块标识是否全部存在于当前流文件中；其中，所述流文件记录所述客户端发送的全部源数据对应的数据块标识；

如果是，则确定存在所述新的数据块。

优选地，若存在新的数据块，则还包括：

将所述流文件更新以添加所述新的数据块的数据块标识。

优选地，所述将所述源数据对应的全部所述数据块发送至后端存储系统具体为：

将所述源数据对应的全部所述数据块发送至DPS服务端；

所述DPS服务端将所述源数据对应的所述全部数据块备份至存储设备。

优选地，所述存储设备具体为物理磁带库或虚拟磁带库。

优选地，所述接收客户端发送的源数据具体通过HyperStream服务端接收所述客户端发送的所述源数据。

为解决上述技术问题，本发明还提供一种基于源数据重删的备份装置，包括：

接收模块，用于接收客户端发送的源数据，并按照预先设定的数据块标识规则判断所述源数据对应的各数据块中是否存在新的数据块；

发送模块，用于如果是，则将所述源数据对应的全部所述数据块发送至后端存储系统以进行数据备份。

优选地，所述接收模块具体包括：

设定单元，用于预先与所述客户端设定所述数据块标识规则；

存储单元，用于将所述源数据对应的全部所述数据块存储至数据库中；

提取单元，用于提取各所述数据块的数据块标识；

判断单元，用于判断各所述数据块标识是否全部存在于当前流文件中；其中，所述流文件记录所述客户端发送的全部源数据对应的数据块标识；

确定单元，用于如果是，则确定存在所述新的数据块。

为解决上述技术问题，本发明还提供一种基于源数据重删的备份装置，包括存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如上述所述的基于源数据重删的备份方法的步骤。

为解决上述技术问题，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上述所述的基于源数据重删的备份方法的步骤。