[发明专利]一种数据查询方法、装置及设备在审
申请号: | 201810268968.0 | 申请日: | 2018-03-29 |
公开(公告)号: | CN110321214A | 公开(公告)日: | 2019-10-11 |
发明(设计)人: | 周祥;李冰;赵永春;温绍锦 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 林祥 |
地址: | 英属开曼群岛大开*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 计算节点 查询请求 资源池 装置及设备 数据查询 资源开销 网络带宽资源 资源动态调节 资源利用率 并行处理 处理效率 动态调节 内存资源 特征信息 用户查询 用户使用 整体计算 申请 查询 | ||
本申请提供一种数据查询方法、装置及设备,该方法包括:根据接收到的查询请求的特征信息获得资源开销;根据所述资源开销和计算节点资源动态调节资源池中的计算节点;通过所述计算节点查询与所述查询请求对应的数据。通过本申请的技术方案,可以动态调节资源池中的计算节点,使得资源池中的计算节点能够处理接收到的所有查询请求,更有效的提高计算节点的处理效率和资源利用率,使得计算节点能够更有效的并行处理多个查询请求,提高CPU资源、内存资源、网络带宽资源的利用率,从而从整体计算资源和用户查询负载角度达到一个更好的效果,提高用户使用感受。
技术领域
本申请涉及互联网技术领域,尤其涉及一种数据查询方法、装置及设备。
背景技术
开放分析服务(Open Analytics)用于为用户提供无服务器化(Serverless)的查询分析服务,能够对海量数据进行任意维度的分析和查询,支持高并发、低延时(毫秒级响应)、实时在线分析、海量数据查询等功能。开放分析服务系统中,可以包括数据源和计算节点,数据源用于存储大量数据,计算节点在接收到查询请求后,从数据源中查询与该查询请求对应的数据。
但是,在某些应用场景下(如地图数据的查询场景、画像数据的查询场景等),计算节点可能在短时间内接收到多个查询请求(即并发数很高),即需要在短时间内处理多个查询请求,导致CPU(Central Processing Unit,中央处理器)资源、内存资源、网络带宽等出现异常,从而导致查询超时或者查询失败。
发明内容
本申请提供一种数据查询方法,所述方法包括:
根据接收到的查询请求的特征信息获得资源开销;
根据所述资源开销和计算节点资源动态调节资源池中的计算节点;
通过所述计算节点查询与所述查询请求对应的数据。
本申请提供一种数据查询方法,所述方法包括:
根据接收到的查询请求的特征信息,将接收到的查询请求划分到至少一个分配组;其中,不同的分配组对应不同的子资源池;
根据分配组中的查询请求的特征信息获得所述分配组的资源开销;
根据所述分配组的资源开销和所述分配组对应的子资源池的计算节点资源,动态调节所述子资源池中的计算节点;
通过子资源池中的计算节点查询与所述分配组中的查询请求对应的数据。
本申请提供一种一种数据查询装置,所述装置包括:
获得模块,用于根据接收到的查询请求的特征信息获得资源开销;
处理模块,根据资源开销和计算节点资源动态调节资源池中的计算节点;
查询模块,用于通过所述计算节点查询与所述查询请求对应的数据。
本申请提供一种数据查询装置,所述装置包括:
划分模块,用于根据接收到的查询请求的特征信息,将接收到的查询请求划分到至少一个分配组;其中,不同分配组对应不同的子资源池;
获得模块,用于根据分配组中的查询请求的特征信息获得所述分配组的资源开销;
处理模块,用于根据所述分配组的资源开销和所述分配组对应的子资源池的计算节点资源,动态调节所述子资源池中的计算节点;
查询模块,用于通过所述子资源池中的计算节点查询与所述分配组中的查询请求对应的数据。
本申请提供一种数据查询设备,包括:处理器,用于根据接收到的查询请求的特征信息获得资源开销;根据资源开销和计算节点资源动态调节资源池中的计算节点;通过所述计算节点查询与所述查询请求对应的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810268968.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种请求处理方法、装置、设备及可读存储介质
- 下一篇:队列控制方法及装置