[发明专利]数据处理方法、系统以及装置有效
申请号: | 202010568789.6 | 申请日: | 2020-06-19 |
公开(公告)号: | CN111475584B | 公开(公告)日: | 2021-01-22 |
发明(设计)人: | 陈梓麟 | 申请(专利权)人: | 阿里云计算有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/242 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 吴肖肖 |
地址: | 310024 浙江省杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 系统 以及 装置 | ||
本说明书实施例提供数据处理方法、系统以及装置,其中所述数据处理方法包括:接收数据处理指令,所述数据处理指令中包含至少一条结构化查询语句,根据所述结构化查询语句的执行代价,确定所述数据处理指令对应的数据处理类型,将所述结构化查询语句发送至与所述数据处理类型匹配的数据处理节点,以使所述数据处理节点基于所述结构化查询语句进行数据处理,获取所述数据处理节点返回的数据处理结果并发送至用户。
技术领域
本说明书实施例涉及分布式数据库技术领域,特别涉及一种数据处理方法。本说明书一个或者多个实施例同时涉及一种数据处理系统、一种数据处理装置,一种计算设备,以及一种计算机可读存储介质。
背景技术
随着传统的数据库技术日趋成熟、计算机网络技术的飞速发展和应用范围的扩大,以分布式为主要特征的数据库系统的研究与开发受到越来越多用户的注意。分布式数据库是数据库技术与网络技术相结合的产物,在数据库领域已形成一个分支。而且分布式数据库系统逐渐进入商品化应用阶段,传统的关系数据库产品均发展成以计算机网络及多任务操作系统为核心的分布式数据库产品,同时分布式数据库逐步向客户机/服务器模式发展。
分布式数据库可以使用由多个独立节点组成、节点间采用网络互联的计算机集群实现数据库的分布式存储、计算等功能。对于分布式数据库来说,能够为不同类型的负载提供稳定可靠的资源隔离环境非常重要,因此,亟需一种数据处理方法以解决此类问题。
发明内容
有鉴于此,本说明书施例提供了一种数据处理方法。本说明书一个或者多个实施例同时涉及一种数据处理系统、一种数据处理装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种数据处理方法,包括:
接收数据处理指令,所述数据处理指令中包含至少一条结构化查询语句;
根据所述结构化查询语句的执行代价,确定所述数据处理指令对应的数据处理类型;
将所述结构化查询语句发送至与所述数据处理类型匹配的数据处理节点,以使所述数据处理节点基于所述结构化查询语句进行数据处理;
获取所述数据处理节点返回的数据处理结果并发送至用户。
可选地,所述根据所述结构化查询语句的执行代价,确定所述数据处理指令对应的数据处理类型,包括:
对所述至少一条结构化查询语句进行解析,获得与所述至少一条结构化查询语句对应的解析结果,所述解析结果中包含待处理数据所属数据表的标识信息以及所述待处理数据的操作类型;
根据所述操作类型对执行所述至少一条结构化查询语句的资源消耗值进行预估,获得执行代价;
根据所述执行代价与预设阈值的大小关系确定所述数据处理类型。
可选地,所述将所述结构化查询语句发送至与所述数据处理类型匹配的数据处理节点,以使所述数据处理节点基于所述结构化查询语句进行数据处理,包括:
将所述结构化查询语句发送至与所述数据处理类型匹配的数据处理节点;
所述数据处理节点根据所述待处理数据所属数据表的标识信息查询分布式数据库中所述数据表的分区表信息;所述分区表信息包含至少一个分区表的存储位置信息;
根据所述存储位置信息,确定所述数据处理节点下的包含所述分区表的至少一个目标处理节点;
基于所述操作类型,按照预设任务格式生成数据处理任务,并下发至对应的所述至少一个目标处理节点。
可选地,若所述执行代价小于等于所述预设阈值,则所述数据处理类型为第一类型;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里云计算有限公司,未经阿里云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010568789.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:数据读取方法及装置
- 下一篇:机床机件润滑油回收装置