[发明专利]一种基于大数据平台存储适配方法，系统，设备及可读存储介质

权利要求书

1.一种基于大数据平台存储适配方法，其特征在于，方法包括：

配置接口组件，并将接口组件配置到所有数据源；

通过接口组件将数据批量存入大数据平台；

通过接口组件将应用程序存放至大数据平台的预设目录。

2.根据权利要求1所述的方法，其特征在于，

步骤通过接口组件将数据批量存入大数据平台还包括：

在大数据平台中对将数据文件编辑成json文件，json文件包括源端数据库类型，抽取表名，KUDU表名，抽取字段名；

将json文件存储在预设目录。

3.根据权利要求2所述的方法，其特征在于，方法还包括：

步骤通过接口组件将数据批量存入大数据平台还包括：

大数据平台接收各个数据源发送的数据存储认证信息，并对数据存储认证信息进行认证；

当所述数据存储认证信息通过时，向所述数据源发送数据获取指令；

大数据平台接收所述数据源发送的数据信息；

将接收的数据信息编辑成json文件，存储在预设目录。

4.一种基于大数据平台存储适配系统，其特征在于，包括：多个数据源和大数据平台；

大数据平台设有接口配置模块，数据接收模块和数据库；

接口配置模块用于配置接口组件，并将接口组件配置到所有数据源；

数据接收模块用于通过接口组件将数据批量存入数据库；

通过接口组件将应用程序存放至数据库的预设目录。

5.根据权利要求4所述的系统，其特征在于，

大数据平台还设有数据处理模块；

数据处理模块用于对将数据文件编辑成json文件；

将json文件存储在数据库的预设目录。

6.根据权利要求5所述的系统，其特征在于，

大数据平台还设有身份认证模块；

身份认证模块用于接收各个数据源发送的数据存储认证信息，并对数据存储认证信息进行认证；

当所述数据存储认证信息通过时，向所述数据源发送数据获取指令；

数据接收模块接收所述数据源发送的数据信息；

数据处理模块将接收的数据信息编辑成json文件，存储在预设目录。

7.根据权利要求4所述的系统，其特征在于，

大数据平台配置有读数据服务端口，写服务服务端口以及dataxCommon服务端口。

8.根据权利要求4所述的系统，其特征在于，

数据源包括oracle数据源、mysql数据源以及DB2数据源。

9.一种实现基于大数据平台存储适配方法的设备，其特征在于，包括：

存储器，用于存储计算机程序及基于大数据平台存储适配方法；

处理器，用于执行所述计算机程序及基于大数据平台存储适配方法，以实现如权利要求1至3任意一项所述基于大数据平台存储适配方法的步骤。

10.一种具有基于大数据平台存储适配方法的可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行以实现如权利要求1至3任意一项所述基于大数据平台存储适配方法的步骤。