[发明专利]一种教育系统的用于Hive离线计算方法及电子设备

说明书

本发明公开了一种教育系统的用于Hive离线计算方法及电子设备，其中，所述方法包括步骤：A.读取数据库中的配置信息；B.对未创建的数据表按照模板生成SQL执行。所述的用于Hive离线计算方法，其中，所述数据库中的配置信息包括数据库的建表和分区配置信息，本发明所述方案能够实现数据库配置的自动建表和分区，可以大大节省开发成本，降低运行出错概率。

技术领域

本发明涉及数据算法领域，尤其涉及一种教育系统的用于Hive离线计算方法及电子设备。

背景技术

在大数据离线计算场景中，通常需要用到Hive计算框架，Hive的优点在于面向开发人员的时SQL语句，而SQL底层会被转化为MapReduce执行。在Hive计算过程中需要大量创建源数据表，并对数据表插入分区，在传统的做法中一般是手动编写所有建表和插入分区的SQL语句，这种做法浪费了大量的时间和人力成本，冗余代码很多，代码运行出错概率大，不易排查。

因此，现有技术还有待于改进和发展。

发明内容

鉴于上述现有技术的不足，本发明的目的在于提供一种教育系统的用于Hive离线计算方法及电子设备，旨在解决快速建表和分区的问题。

本发明的技术方案如下：

一种教育系统的用于Hive离线计算方法，其中，包括步骤：

A.读取数据库中的配置信息；

B.对未创建的数据表按照模板生成SQL执行。

所述的用于Hive离线计算方法，其中，所述数据库中的配置信息包括数据库的建表和分区配置信息。

所述的用于Hive离线计算方法，其中，所述步骤A之前还包括：

接收用户在UI页面输入的建表和分区字段信息的表单，生成配置插入数据库中。

所述的用于Hive离线计算方法，其中，所述步骤B包括：

判断数据表是否已创建，当已创建时，跳过配置信息；

当数据表未创建时，读取模板信息；

将建表和分区字段信息插入模板中生成SQL执行。

所述的用于Hive离线计算方法，其中，所述将建表和分区字段信息插入模板中生成SQL执行的步骤中，对建表和分区字段信息进行校验，判断所述建表和分区字段信息是否违规，当违规时进行报错。

一种电子设备，其中，包括：

包括处理器，适于实现各指令，以及

存储设备，适于存储多条指令，所述指令适于由处理器加载并执行：

读取数据库中的配置信息；

对未创建的数据表按照模板生成SQL执行。

所述的电子设备，其中，所述数据库中的配置信息包括数据库的建表和分区配置信息。

所述的电子设备，其中，所述处理器还用于加载并执行：

接收用户在UI页面输入的建表和分区字段信息的表单，生成配置插入数据库中。

所述的电子设备，其中，所述处理器还用于加载并执行：

判断数据表是否已创建，当已创建时，跳过配置信息；

当数据表未创建时，读取模板信息；

将建表和分区字段信息插入模板中生成SQL执行。