[发明专利]一种基于云服务的数据导出方法、装置及电子设备

说明书

本发明公开了一种基于云服务的数据导出方法、装置及电子设备，所述方法包括：在云服务中配置数据导出任务；将云服务中待导出的数据表结构信息转换为第一目标数据库的数据表结构信息，并基于第一目标数据库的数据表结构信息在第一目标数据库中建立数据表；执行数据导出任务，检测数据导出任务是否完成；若数据导出任务已完成，将云服务中待导出的数据同步导出到第一目标数据库建立的数据表中；控制第二目标数据库通过表引擎读取第一目标数据库的数据。本发明通过在第一目标数据库中建立数据表及导出工具将云服务数据自动导出到外部的第二目标数据库中，突破现有云服务的沙箱隔离机制，实现云服务数据的自动导出。

技术领域

本发明涉及数据处理技术领域，具体而言，涉及一种基于云服务的数据导出方法、装置、电子设备及计算机可读介质。

背景技术

云服务是一种快速、完全托管的数据仓库解决方案，致力于批量处理结构化数据的存储和计算，提供海量数据仓库的解决方案及分析建模服务。其向用户提供完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。

在实际应用中，为了灵活的展现数据，需要将云服务上数仓模型数据导入到数据可视化平台中进行展现，方便分析人员对数据的分析和挖掘。而云服务是一个封闭的沙箱隔离环境，无法连接至外部数据库，不支持数据导出功能，无法满足用户对云服务数据进行分析处理的个性化需求。

发明内容

有鉴于此，本发明主要目的在于提出一种基于云服务的数据导出方法、装置、电子设备及计算机可读介质，以期至少部分地解决上述技术问题中的至少之一。

为了解决上述技术问题，本发明第一方面提出一种基于云服务的数据导出方法，所述方法包括：

在云服务中配置数据导出任务；

将云服务中待导出的数据表结构信息转换为第一目标数据库的数据表结构信息，并基于第一目标数据库的数据表结构信息在第一目标数据库中建立数据表；

执行数据导出任务，检测数据导出任务是否完成；

若数据导出任务已完成，将云服务中待导出的数据同步导出到第一目标数据库建立的数据表中；

控制第二目标数据库通过表引擎读取第一目标数据库的数据。

根据本发明一种优选实施方式，所述检测导出结果文件是否生成之前，所述方法还包括：

基于预先配置的导出规则生成异构源数据同步工具运行所需的数据交换格式文件；

异构源数据同步工具执行所述数据交换格式文件将云服务中待导出的数据同步导出到第一目标数据库建立的数据表中。

根据本发明一种优选实施方式，所述方法还包括：

分别在云服务和第二目标数据库中执行预先配置的数据校验语句并分别获取第一校验结果和第二校验结果；

判断第一校验结果与第二校验结果是否一致；

若第一校验结果与第二校验结果不一致，发出警报。

根据本发明一种优选实施方式，若第一校验结果与第二校验结果一致，更新导出日志。

根据本发明一种优选实施方式，所述将云服务中待导出的数据表结构信息转换为第一目标数据库的数据表结构信息包括：

存储历史待导出数据表结构信息；

判断是否存在与云服务中待导出的数据表结构信息对应的目标历史待导出数据表结构信息；

若存在，根据目标历史导出数据表结构信息提取第一目标数据库的数据表结构信息；