[发明专利]数据处理方法、系统以及装置

权利要求书

1.一种数据处理方法，应用于包括读写节点和只读节点的分布式数据库中，包括：

接收数据处理指令，所述数据处理指令中包含至少一条结构化查询语句；

确定所述结构化查询语句的操作类型，根据预先建立的映射关系表确定与所述操作类型对应的执行代价，根据所述执行代价与预设阈值的大小关系，确定所述数据处理指令对应的数据处理类型，其中，若所述执行代价小于等于所述预设阈值，则所述数据处理类型为联机事务处理类型OLTP，若所述执行代价大于所述预设阈值，则所述数据处理类型为联机分析处理类型OLAP；

将所述结构化查询语句发送至与所述数据处理类型匹配的数据处理节点，若所述数据处理类型为联机事务处理类型OLTP，则发送给读写节点处理，若所述数据处理类型为联机分析处理类型OLAP，则发送给只读节点处理，以使所述对应的数据处理节点基于所述结构化查询语句进行数据处理；

获取所述数据处理节点返回的数据处理结果并发送至用户。

2.根据权利要求1所述的数据处理方法，所述确定所述结构化查询语句的操作类型，根据预先建立的映射关系表确定与所述操作类型对应的执行代价，根据所述执行代价与预设阈值的大小关系，确定所述数据处理指令对应的数据处理类型，包括：

对所述至少一条结构化查询语句进行解析，获得与所述至少一条结构化查询语句对应的解析结果，所述解析结果中包含待处理数据所属数据表的标识信息以及所述待处理数据的操作类型；

根据所述操作类型对执行所述至少一条结构化查询语句的资源消耗值进行预估，获得所述至少一条结构化查询语句的执行代价；

根据所述执行代价与预设阈值的大小关系确定所述数据处理类型。

3.根据权利要求1所述的数据处理方法，所述将所述结构化查询语句发送至与所述数据处理类型匹配的数据处理节点，包括：

将所述结构化查询语句发送至与所述数据处理类型匹配的数据处理节点；

所述数据处理节点根据待处理数据所属数据表的标识信息查询分布式数据库中所述数据表的分区表信息；所述分区表信息包含至少一个分区表的存储位置信息；

根据所述存储位置信息，确定所述数据处理节点下的包含所述分区表的至少一个目标处理节点；

基于所述操作类型，按照预设任务格式生成数据处理任务，并下发至对应的所述至少一个目标处理节点。

4.根据权利要求1所述的数据处理方法，若所述数据处理类型为联机事务处理类型OLTP，则发送给读写节点处理，包括：

基于所述联机事务处理类型OLTP启动第一任务链路中的读写计算节点，根据所述结构化查询语句生成数据处理任务；

基于所述数据处理任务触发所述第一任务链路的读写存储节点，以使所述读写存储节点执行所述数据处理任务。

5.根据权利要求4所述的数据处理方法，所述基于所述联机事务处理类型OLTP启动第一任务链路中的读写计算节点，根据所述结构化查询语句生成数据处理任务，包括：

基于所述联机事务处理类型OLTP启动第一任务链路中的读写计算节点，所述读写计算节点根据待处理数据所属数据表的标识信息查询分布式数据库中所述数据表的分区表信息；所述分区表信息包含至少一个分区表的存储位置信息；

根据所述存储位置信息，确定所述读写计算节点下的包含所述分区表的至少一个读写存储节点；

基于所述操作类型，按照预设任务格式生成与所述至少一个读写存储节点对应的数据处理任务。

6.根据权利要求1所述的数据处理方法，若所述数据处理类型为联机分析处理类型OLAP，则发送给只读节点处理，包括：

基于所述联机分析处理类型OLAP启动第二任务链路中的只读计算节点，根据所述结构化查询语句生成数据处理任务；

基于所述数据处理任务触发所述第二任务链路的只读存储节点，以使所述只读存储节点执行所述数据处理任务。