[发明专利]一种反向数据抓取实现云容灾备份的方法及系统

说明书

技术领域

本发明属于数据备份领域，尤其涉及一种通过反向对源端服务器的数据抓取实现在云容灾混合云备份的方法及系统。

背景技术

传统数据备份实现方式：传统备份软件如IBM TSM， Symantec Netbackup和EMC Networker等备份软件，均采用在被备份服务器端安装备份Agent的实现方式。 具体方式为： 在需要备份的源端服务器上， 安装抓取该服务器数据的备份软件模块（Agent），然后备份软件模块将通过该Agent或是安装的多个Agent， 将源端服务器上的数据备份至后端的备份介质上。在源端服务器发生数据丢失时，将通过后端的备份介质，给予恢复。这种实现方式在实际操作中比较麻烦，因为源端服务器有不同的操作系统和应用服务，各个系统和应用服务的版本不同，故而实际安装维护操作时带来的很大的麻烦与不便。

在云计算和大数据模式下，该种传统方式无法实现数据的保护与备份。因为在大数据采用DFS/HDFS数据结构方式，每个元数据将有3个目标拷贝相对应， 更何况这种动辄源端有上千台服务器，采用装Agent的方式将会无法进行管理，且工作量巨大。

另外一个问题是高费用，由于要支持源端不同的操作系统和应用软件，因而源端服务器的Agent要有多个模块， 有些模块是支持不同操作系统的，有些模块是支持不同数据库的，有些模块是支持运行与该数据库上的应用服务的。有些模块是支持虚拟化层的。同个服务器上多个Agent的实现方式虽然能解决了传统数据备份的需求，但是带来的却是价格的高昂。

发明内容

本发明的目的在于提供一种反向数据抓取实现云容灾备份的方法，旨在解决传统备份软件中在源端服务器上必须安装各种agent模块来进行备份的问题。

本发明是这样实现的，一种反向数据抓取实现云容灾备份的方法，所述方法包括以下步骤：

A、数据抓取前置机通过网络与需保护的服务器建立连接；

B、前置机通过授权用户账号登录至源端服务器抓取数据信息；

C、将抓取的源端实时数据信息经缓存后存入本地生成元数据；

D、将前置机生成的元数据传输到本地后置机；

E、对前置机和本地后置机的元数据进行对比，若元数据对比一致，则将元数据进行存储并执行步骤F；若元数据对比不一致，则执行步骤D；

F、将本地后置机存储的元数据传输到异地后置机；

G、对本地后置机和异地后置机的元数据进行对比，若元数据对比一致，则将元数据进行存储；若元数据对比不一致，则执行步骤F。

本发明的进一步技术方案是：所述步骤B包括以下步骤：

B1、前置机通过授权用户登录至源端服务器；

B2、前置机读取数据信息发出操作指令进行数据处理后放置缓存中；

B3、前置机从源端缓存中抓取数据对其加密并压缩。

本发明的进一步技术方案是：所述步骤C包括以下步骤：

C1、将抓取的源端实时数据信息写入前置机的缓存或内存；

C2、将缓存或内存底端字节存储的数据存入本地磁盘生成元数据。

本发明的进一步技术方案是：所述前置机抓取数据时会在源端服务器数据做标识区分该数据时候被抓取。

本发明的进一步技术方案是：所述前置机抓取数据首次采用全量方式抓取，再抓取数据采用增量方式抓取。

本发明的进一步技术方案是：所述缓存或内存底端字节存储到本地磁盘采用缓存FIFO方式存入。

本发明的进一步技术方案是：所述前置机内置各类操作系统模块及各类数据库系统模块。

本发明的另一目的在于提供一种反向数据抓取实现云容灾备份的系统，该系统包括：

通道建立模块，用于数据抓取前置机通过网络与需保护的服务器建立连接；

数据抓取模块，用于前置机通过授权用户账号登录至源端服务器抓取数据信息；

本地存储模块，用于将抓取的源端实时数据信息经缓存后存入本地生成元数据；

一次传输模块，用于将前置机生成的元数据传输到本地后置机；

一次元数据对比模块，对前置机和本地后置机的元数据进行对比，若元数据对比一致，则将元数据进行存储并执行步骤F；若元数据对比不一致，则执行步骤D；

二次传输模块，用于将本地后置机存储的元数据传输到异地后置机；

二次元数据对比模块，用于对本地后置机和异地后置机的元数据进行对比，若元数据对比一致，则将元数据进行存储；若元数据对比不一致，则执行步骤F。