[发明专利]数据抽取方法、装置、计算机设备和存储介质

说明书

本申请提供一种数据抽取方法、装置、计算机设备和存储介质，通过获取用户的报表分析请求，该报表分析请求包括：至少一个生产库的标识，再根据至少一个生产库的标识，查询本地数据库，获取每个生产库的数据，本地数据库中预先存储有从至少一个生产库获取到的至少一个数据源类型的数据，最后根据至少一个生产库的数据，生成报表分析结果。该技术方案中，通过在本地数据库中查询至少一个数据源类型的数据，避免了对生产库访问产生的压力、以及访问过程中可能存在污染生产库的情况发生，同时数据抽取可以将多种类型的生产库的数据进行融合，以达到跨库分析的目的。

技术领域

本申请涉及数据处理技术领域，尤其涉及一种数据抽取方法、装置、计算机设备和存储介质。

背景技术

在互联网高速发展的今天，无论是政府、企业、甚至社会的方方面面，时刻都在发生着巨大的变化，捕获这些变化的数据，以形成报告对于相关用户来说显得尤为重要，因此，报表分析应运而生，即将这些变化的数据转变为用户可视化的文字和/或图像。

在现有技术中，报表分析工具采用直连数据源所在生产库，使用结构化查询语言(Structured Query Language，SQL)脚本在生产库中拽取所需要的数据，然后将这些数据进行可视化展示，例如，生成报表，以供用户查看。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：需要从数据源所在生产库获取数据时，均需要直连该生产库，会对生产库产生访问压力，并且可能会存在污染生产库的情况发生。

发明内容

本申请实施例提供一种数据抽取方法、装置、计算机设备和存储介质，用以解决现有技术中直连数据源所在生产库时存在的生产库访问压力大、可能会污染生产库的问题。

第一方面，本申请实施例提供一种数据抽取方法，包括：

获取用户的报表分析请求，所述报表分析请求包括：至少一个生产库的标识；

根据所述至少一个生产库的标识，查询本地数据库，获取每个生产库的数据，所述本地数据库中预先存储有从至少一个生产库获取到的至少一个数据源类型的数据；

根据所述至少一个生产库的数据，生成报表分析结果。

在第一方面一种可能的设计中，所述报表分析请求还包括：每个生产库对应的数据源类型标识；

相应的，所述根据所述至少一个生产库的标识，查询本地数据库，获取每个生产库的数据，包括：

对于每个生产库，根据所述生产库对应的数据源类型标识，在所述本地数据库中，获取所述生产库对应数据源类型标识的数据。

在第一方面另一种可能的设计中，还包括：

获取用户的数据抽取请求，所述数据抽取请求包括：第一生产库的标识和数据源类型；

根据预置的数据抽取规则，通过与每个生产库之间的数据连接通路，从每个生产库中获取所述数据源类型的数据；

将所述数据源类型的数据存储至本地数据库中。

在该种可能的设计中，在所述获取用户的数据抽取请求之前，所述方法还包括：

获取用户的数据连接请求，所述数据连接请求包括：第二生产库的标识；

根据所述数据连接请求，跳转到指示用户输入通路建立配置信息的界面；

获取所述用户输入的通路建立配置信息；

在所述通路建立配置信息验证通过时，根据所述第二生产库的标识和所述通路建立配置信息，分别建立与所述第二生产库的数据连接通路。

可选的，所述方法还包括：