[发明专利]数据交换脚本语言SQLScript

说明书

技术领域：

针对数据仓库、数据挖掘、商业智能、大数据和云计算领域中，本发明提供了一种可以在不同类型数据库之间进行数据交换和数据加工的脚本语言。

背景技术：

在复杂的数据分析环境中，往往存在多种类型的数据库，数据分析通常需要在这些不同类型数据库之间进行数据交换和数据加工。但困难在于，这些数据库通常只能处理自身内部数据，无法从外部数据源主动获取数据，或者向外部数据源主动推送数据。

这样的技术环境，导致数据分析人员在数据分析过程中，需要使用多种工具和技术来处理数据。数据分析人员不仅仅要掌握多种数据处理工具的使用，大量的情况还需要数据分析人员手工卸载和加载数据，数据分析人员在数据准备阶段上需要耗费大量的时间和精力。

发明内容：

针对上述问题，本发明提供了一种能够在不同数据库之间交换数据，并能向各个数据源提交数据加工SQL的数据交换脚本语言SQLScript。

SQLScript脚本语言能够解析和容纳多种数据库的SQL语言，同时提供如下功能的数据交换语句：

l 数据交换语句

l 文件包含语句

l 数据源切换语句

l 变量声明语句

l 赋值语句

l 条件判断语句

l 异步提交语句

l 外部数据源脚本语句

1. 数据交换语句

数据交换语句能够在数据库表、文件、SQL查询结果之间交换数据，使用一条数据交换语句就可以完成物理表数据的迁移、文件数据的卸载和加载。

文法如下：

LOAD_STMT:

LOAD INTO loadType FROM loadType;

loadType:

DSNAME.DBNAME.TBNAME

| EXP

| SELECT ...;

应用范例：

load into myoracle.sdb.t_user from mygp.sdb.t_user;

load into myoracle.sdb.t_user from "/data/user_20151010.txt";

load into myoracle.sdb.t_user from select * from mygp.sdb.t_user where age > 18;

2.文件包含语句

文件包含语句能够执行预编译操作，把指定文件的脚本内容包含到当前脚本内，作为一个完整的脚本文件进行编译运行。

文法如下：

INCLUDE_STMT:

include EXP ;

应用范例：

include "/script/job_10001.ss";

3.数据源切换语句

数据源切换语句负责使用指定的数据源激活为当前可用数据源，后续未指定数据源的数据查询和数据加工语句将会直接提交到当前数据源内执行。

文法如下：

DATASOURCE_STMT:

datasource DSNAME;

应用范例：

datasource myora;

4.变量声明语句

变量声明语句允许声明一个临时变量。目前SQLScript支持使用可变类型变量，允许根据赋值语句的情况动态改变自身数据类型，来简化代码和提高开发效率。

文法如下：

DECLARE_STMT:

var VARNAME；

应用范例：

var count;

5.赋值语句

赋值语句允许为变量赋值，既可以使用表达式来为变量赋值，也允许使用SQL select语句来为变量赋值。这样既可以使用脚本进行一些基本的运算，也可以将数据库的查询计算结果传给给脚本，来做后续计算处理。

文法如下：

VARNAME = EXP | select ...;

应用范例：

count = 0;

count = select count(*) from testdb.t_user where age > 18;

6.条件判断语句