[发明专利]一种基于大数据平台的多源数据备份方法及系统

说明书

本发明公开一种基于大数据平台的多源数据备份方法及系统，涉及数据保存技术领域；基于大数据平台，选择备份数据来源，匹配权限，根据匹配的权限进行备份流程的配置，其中根据所述备份数据来源配置用于备份数据的功能组件，形成备份数据的备份流程，根据所述备份流程，执行数据备份任务，其中读取所述备份流程的配置信息并执行，同时监控备份流程，根据监控情况，执行告警操作，发送告警信息。

技术领域

本发明公开一种方法及系统，涉及数据保存技术领域，具体地说是一种基于大数据平台的多源数据备份方法及系统。

背景技术

在大数据处理过程中，数据备份是容灾的基础，防止系统出现操作失误或系统故障导致数据丢失，是将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。现有数据备份主要是采用内置或外置的磁带机进行冷备份。但是这种方式只能防止操作失误等人为故障，而且其恢复时间也很长。随着技术的不断发展，数据的海量增加，数据的存储方式也越来越多，数据库类型也越来越多，但数据存储方式及操作命令不同导致不同数据库之间很难进行数据导入导出。

发明内容

本发明针对现有技术的问题，提供一种基于大数据平台的多源数据备份方法及系统，可运用在大数据数据处理方面，将多种数据源数据备份。

本发明提出的具体方案是：

一种基于大数据平台的多源数据备份方法，基于大数据平台，选择备份数据来源，

匹配权限，根据匹配的权限进行备份流程的配置，其中根据所述备份数据来源配置用于备份数据的功能组件，形成备份数据的备份流程，

根据所述备份流程，执行数据备份任务，其中读取所述备份流程的配置信息并执行，同时监控备份流程，

根据监控情况，执行告警操作，发送告警信息。

进一步，所述的一种基于大数据平台的多源数据备份方法中所述匹配权限，根据匹配的权限进行备份流程的配置，包括：

根据备份数据来源的业务信息，定时进行匹配权限，并根据匹配的权限进行备份流程的配置。

进一步，所述的一种基于大数据平台的多源数据备份方法中所述监控备份流程，包括：

查询备份状态及备份信息。

进一步，所述的一种基于大数据平台的多源数据备份方法中所述所述基于大数据平台，包括：

利用大数据平台前端，选择备份数据，

匹配权限，根据匹配的权限进行备份流程的配置，

根据所述备份流程，执行数据备份任务，

根据监控情况，执行告警操作，发送告警信息。

本发明还提供一种基于大数据平台的多源数据备份系统，包括选择模块、权限配置模块、流程执行模块及告警模块，

选择模块选择备份数据来源，

权限配置模块匹配权限，根据匹配的权限进行备份流程的配置，其中根据所述备份数据来源配置用于备份数据的功能组件，形成备份数据的备份流程，

流程执行模块根据所述备份流程，执行数据备份任务，其中读取所述备份流程的配置信息并执行，同时监控备份流程，

告警模块根据监控情况，执行告警操作，发送告警信息。

进一步，所述的一种基于大数据平台的多源数据备份系统中所述权限配置模块匹配权限，根据匹配的权限进行备份流程的配置，包括：

根据备份数据来源的业务信息，定时进行匹配权限，并根据匹配的权限进行备份流程的配置。