[发明专利]一种数据查询方法、装置、设备及介质在审
| 申请号: | 202111029248.7 | 申请日: | 2021-09-03 |
| 公开(公告)号: | CN113468220A | 公开(公告)日: | 2021-10-01 |
| 发明(设计)人: | 任智新;张闯;谢志勇;王敏;孙忠祥 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
| 主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/245 |
| 代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王晓坤 |
| 地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据 查询 方法 装置 设备 介质 | ||
本申请公开了一种数据查询方法、装置、设备及介质,包括:当执行针对数据块的数据查询操作时,获取数据占比均值;其中,所述数据占比均值为历次数据查询操作中符合查询条件的数据量与相应数据块的总数据量的比值的均值,并且,所述数据查询操作均为同一数据查询任务下的查询操作,所述数据块为目标数据库的数据块,所述目标数据库为所述数据查询任务对应的数据库;判断所述数据占比均值是否小于数据占比阈值;若是,则将当前数据块搬移至FPGA加速设备进行处理,否则利用数据库管理软件对当前数据块进行处理。这样,能够提升数据查询任务的处理效率,从而提升用户体验。
技术领域
本申请涉及数据处理技术领域,特别涉及一种数据查询方法、装置、设备及介质。
背景技术
随着智能社会、云时代、物联网万物互连等数据密集型应用的出现,数据库中的数据量和用户访问量急剧上升,亟需提升数据库的处理速度。为了缓解日益增长的数据量给CPU(即Central Processing Unit,中央处理器)带来的计算压力,很多研究都集中在硬件加速上,硬件加速已经被证明是一个有效的解决方法,是提高数据库管理系统中数据密集型应用程序性能的解决方案。与高性能GPU(即Graphics Processing Unit,图形处理器)相比,FPGA更适用于出现计算瓶颈的数据库应用,因为它具有相当大的计算能力和更高的能效比,这对于数据中心来说至关重要。另外,由于FPGA本身的高并行性,对于相同的数据库查询任务,它比CPU和ARM(即Advanced RISC Machine,微处理器)等通用处理器消耗的计算时间更少,且消耗的功耗更低,因此业界出现了一系列基于FPAG的异构加速解决方案。
基于FPGA的异构加速方案中,中心思想将计算密集的任务由CPU执行卸载到FPGA中执行。而对于任务的分配上,大都是直接将数据库查询相关的任务全部卸载到FPGA中执行,但有些查询任务,将任务直接卸载到FPGA反而会消耗更多的时间,影响用户体验。
发明内容
有鉴于此,本申请的目的在于提供一种数据查询方法、装置、设备及介质,能够提升数据查询任务的处理效率,从而提升用户体验。其具体方案如下:
第一方面,本申请公开了一种数据查询方法,包括:
当执行针对数据块的数据查询操作时,获取数据占比均值;其中,所述数据占比均值为历次数据查询操作中符合查询条件的数据量与相应数据块的总数据量的比值的均值,并且,所述数据查询操作均为同一数据查询任务下的查询操作,所述数据块为目标数据库的数据块,所述目标数据库为所述数据查询任务对应的数据库;
判断所述数据占比均值是否小于数据占比阈值;
若是,则将当前数据块搬移至FPGA加速设备进行处理,否则利用数据库管理软件对当前数据块进行处理。
可选的,还包括:
将测试数据集对应的数据查询任务分别利用FPGA加速设备和数据库管理软件进行处理;
确定利用FPGA加速设备进行处理的第一消耗时间,以及利用数据库管理软件进行处理的第二消耗时间;
基于所述第一消耗时间和所述第二消耗时间从全部数据占比中确定出目标占比,并将所述目标占比作为所述数据占比阈值;
其中,所述数据占比为数据查询任务下任一次数据查询操作中符合查询条件的数据量与相应数据块的总数据量的比值,并且,所述目标占比对应的所述第一消耗时间与所述第二消耗时间相等。
可选的,将当前数据块搬移至FPGA加速设备进行处理,或利用数据库管理软件对当前数据块进行处理之后,还包括:
对本次以及历次数据查询操作中符合查询条件的数据量与相应数据块的总数据量的比值进行中值滤波,并将滤波结果作为下一次数据查询操作对应的所述数据占比阈值。
可选的,将当前数据块搬移至FPGA加速设备进行处理,或利用数据库管理软件对当前数据块进行处理之后,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111029248.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





