[发明专利]数据查询耗时评估方法、装置、计算机设备和存储介质在审
申请号: | 201910666596.1 | 申请日: | 2019-07-23 |
公开(公告)号: | CN110516123A | 公开(公告)日: | 2019-11-29 |
发明(设计)人: | 王富平;翟小青;杨升;陈乃帅;孙迁 | 申请(专利权)人: | 苏宁云计算有限公司 |
主分类号: | G06F16/903 | 分类号: | G06F16/903;G06F16/906 |
代理公司: | 11111 北京市万慧达律师事务所 | 代理人: | 张慧娟<国际申请>=<国际公布>=<进入 |
地址: | 210000 江苏省南*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 表信息 数据查询 数据特征 耗时 查询数据 数据查询请求 计算机设备 查询请求 存储介质 接收数据 评估结果 评估模型 转换 评估 预设 解析 数据库 查询 申请 | ||
1.一种数据查询耗时评估方法,所述方法包括:
接收数据查询请求,并将所述数据查询请求解析为执行计划;
对所述执行计划进行数据特征转换,得到第一查询数据特征;
获取第一全表信息,对所述第一全表信息进行数据特征转换,得到第一全表信息数据特征,所述第一全表信息为在当前数据库中查询到的全表信息;
根据所述第一查询数据特征、所述第一全表信息数据特征和预设的数据查询耗时评估模型,得到数据查询耗时评估结果。
2.根据权利要求1所述的方法,其特征在于,所述数据查询耗时评估结果包括多个执行计划的耗时评估结果,所述多个执行计划的耗时评估结果用于选择最优执行计划。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
从数据库日志中获取数据查询历史记录,得到数据查询历史记录和所述数据查询历史记录对应的数据查询耗时;
对所述数据查询耗时进行时间离散处理,得到分类标签数据;
对所述数据查询历史记录进行数据特征转换,得到第二查询数据特征;
获取第二全表信息,对所述第二全表信息进行数据特征转换,得到第二全表信息数据特征,所述第二全表信息为各数据查询历史记录对应的全表信息;
利用所述分类标签数据、所述第二查询数据特征、所述第二全表信息数据特征进行模型训练,得到所述数据查询耗时评估模型。
4.根据权利要求3所述的方法,其特征在于,所述对所述数据查询历史记录进行数据特征转换,得到第二查询数据特征,包括:
采用预设的编码方式将数据查询历史纪录转换成预设格式的数据特征,得到第二查询数据特征,所述第二查询数据特征包括表信息数据特征、过滤字段数据特征、分析字段数据特征、时间分区数据特征。
5.根据权利要求3所述的方法,其特征在于,所述方法还包括:
根据所述第二全表信息数据计算所述第二全表信息数据的平均值和所述第二全表信息数据的标准方差,去除所述第二全表信息数据中距离所述平均值大于设定倍数的标准方差的数据。
6.根据权利要求3所述的方法,其特征在于,所述方法还包括:
在本次数据查询完成后,将本次数据查询耗时、所述第一查询数据特征、所述第一全表信息数据特征输入所述数据查询评估模型进行模型训练,获得新的数据查询耗时评估模型。
7.一种数据查询耗时评估装置,其特征在于,所述装置包括:
数据采集模块,用于接收数据查询请求,并将所述数据查询请求解析为执行计划;
第一数据处理模块,用于对所述执行计划进行数据特征转换,得到第一查询数据特征;
第二数据处理模块,用于获取第一全表信息,对所述第一全表信息进行数据特征转换,得到第一全表信息数据特征,所述第一全表信息为在当前数据库中查询到的全表信息;
评估模块,用于根据所述第一查询数据特征、所述第一全表信息数据特征和预设的数据查询耗时评估模型,得到数据查询耗时评估结果。
8.根据权利要求7所述的装置,其特征在于:
所述数据采集模块还用于从数据库日志中获取数据查询历史记录,得到数据查询历史记录和所述数据查询历史记录对应的数据查询耗时;
所述第一数据处理模块还用于对所述数据查询耗时进行时间离散处理,得到分类标签数据,对所述数据查询历史记录进行数据特征转换,得到第二查询数据特征;
所述第二数据处理模块还用于获取第二全表信息,对所述第二全表信息进行数据特征转换,得到第二全表信息数据特征,所述第二全表信息为各数据查询历史记录对应的全表信息;
所述评估模块还用于利用所述分类标签数据、所述第二查询数据特征、所述第二全表信息数据特征进行模型训练,得到所述数据查询耗时评估模型。
9.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏宁云计算有限公司,未经苏宁云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910666596.1/1.html,转载请声明来源钻瓜专利网。