[发明专利]基于指令集生成的大数据处理方法及装置

权利要求书

1.一种基于指令集生成的大数据处理方法，其特征在于，包括：

生成即时编译函数；

利用所述即时编译函数对大数据进行处理；

其中，所述生成即时编译函数包括：

建立指令库，所述指令库内存储有多种中间表示指令；

根据用户需求确定相应的函数执行流程；

根据所述函数执行流程选取所述指令库中与所述函数执行流程匹配的中间表示指令，生成中间表示指令集；

将所述中间表示指令集生成所述即时编译函数；

所述确定相应的函数执行流程，包括：

根据用户需求生成表达式树；

遍历所述表达式树，获取该表达式树的属性信息；

根据所述表达式树及其所述属性信息，确定所述函数执行流程。

2.根据权利要求1所述的大数据处理方法，其特征在于，所述中间表示指令是封装后存储在所述指令库中的。

3.根据权利要求1所述的大数据处理方法，其特征在于，所述即时编译函数是采用底层虚拟机即时编译方法生成的。

4.根据权利要求1所述的大数据处理方法，其特征在于，在所述利用所述即时编译函数对大数据进行处理之前，还包括自动向量化处理，具体包括：

分析所述用户需求的并行性；

根据所述并行性的分析结果在所述即时编译函数中添加相应的自动向量化处理指令。

5.一种基于指令集生成的大数据处理装置，其特征在于，包括：

函数生成模块，用于生成即时编译函数；

处理模块，用于利用所述即时编译函数对大数据进行处理；

其中，所述即时编译函数生成模块包括：

指令库建立子模块，用于建立指令库，所述指令库内存储有多种中间表示指令；

流程确定子模块，用于根据用户需求确定相应的函数执行流程；

指令集生成子模块，用于根据所述函数执行流程选取所述指令库中与所述函数执行流程匹配的中间表示指令，生成中间表示指令集；

函数生成子模块，用于将所述中间表示指令集生成所述即时编译函数；

所述流程确定子模块包括：

树生成单元，用于根据用户需求生成表达式树；

属性信息获取单元，用于遍历所述表达式树，获取该表达式树的属性信息；

函数执行流程确定单元，用于根据所述表达式树及其所述属性信息，确定函数执行流程。

6.根据权利要求5所述的大数据处理装置，其特征在于，所述中间表示指令是封装后存储在所述指令库中的。

7.根据权利要求5所述的大数据处理装置，其特征在于，所述即时编译函数是采用底层虚拟机即时编译方法生成的。

8.根据权利要求5所述的大数据处理装置，其特征在于，还包括向量化处理模块，用于在所述利用所述即时编译函数对大数据进行处理之前，进行自动向量化处理；

所述向量化处理模块包括：

并行性分析子模块，用于分析所述用户需求的并行性；

指令增加子模块，用于根据所述并行性的分析结果在所述即时编译函数中添加相应的自动向量化处理指令。