[发明专利]一种基于BI系统的数据处理方法及系统

权利要求书

1.一种基于BI系统的数据处理方法，其特征在于，包括以下步骤：

步骤一：服务器接收客户端数据库拆分请求，所述数据库拆分请求基于SQL语句对数据库中的数据表进行拆分请求；

步骤二：基于获取的所述SQL拆分规则，对所述SQL语句进行拆分，使得所述数据表均分成N份目标数据；

步骤三：将得到的所述N份目标数据存储至所述数据库的内存缓冲池；

步骤四：将所述数据库的内存缓冲池中的所述N份目标数据合并发送至共享存储。

2.根据权利要求1所述的一种基于BI系统的数据处理方法，其特征在于，所述服务器接收客户端数据库拆分请求之后，所述步骤还包括：

将所述服务器接收的所述数据库拆分请求标记为待处理数据量分析；

根据所述待处理数据量分析对所述数据库中所述数据表查询记录数进行分析。

3.根据权利要求2所述的一种基于BI系统的数据处理方法，其特征在于，所述基于获取的所述SQL拆分规则之前，所述步骤还包括：

根据所述数据库的性能自动配置参数，所述数据库性能包括CPU、内存、数据库类型；

基于所述配置的参数获取所述SQL拆分规则。

4.根据权利要求1所述的一种基于BI系统的数据处理方法，其特征在于，对所述SQL语句进行拆分，所述步骤包括：

基于状态异步补偿机制对所述SQL语句进行拆分。

5.根据权利要求1所述的一种基于BI系统的数据处理方法，其特征在于，所述将所述数据库的内存缓冲池中的所述N份目标数据合并发送至共享存储。所述步骤包括：

基于状态异步补偿机制将所述数据库的内存缓冲池中的所述N份目标数据合并发送至共享存储。

6.一种基于BI系统的数据处理系统，其特征在于，所述系统包括：

接收单元，用于服务器接收客户端数据库拆分请求，所述数据库拆分请求基于SQL语句对数据库中的数据表进行拆分请求；

拆分单元，用于基于获取的所述SQL拆分规则，对所述SQL语句进行拆分，使得所述数据表均分成N份目标数据；

存储单元，用于将得到的所述N份目标数据存储至所述数据库的内存缓冲池；

发送单元，用于将所述数据库的内存缓冲池中的所述N份目标数据合并发送至共享存储。

7.根据权利要求6所述的一种基于BI系统的数据处理系统，其特征在于，所述系统还包括：

标记单元，用于将所述服务器接收的所述数据库拆分请求标记为待处理数据量分析；

分析单元，用于据所述待处理数据量分析对所述数据库中所述数据表查询记录数进行分析。

8.根据权利要求7所述的一种基于BI系统的数据处理系统，其特征在于，所述系统还包括：

配置单元，用于根据所述数据库的性能自动配置参数，所述数据库性能包括CPU、内存、数据库类型；

获取单元，基于所述配置的参数获取所述SQL拆分规则。

9.根据权利要求6所述的一种基于BI系统的数据处理系统，其特征在于，所述拆分单元包括：

拆分子单元，用于基于状态异步补偿机制对所述SQL语句进行拆分。

10.根据权利要求6所述的一种基于BI系统的数据处理系统，其特征在于，所述发送单元包括：

发送子单元，用于基于状态异步补偿机制将所述数据库的内存缓冲池中的所述N份目标数据合并发送至共享存储。