[发明专利]数据处理方法、装置及电子设备在审
申请号: | 202110291876.6 | 申请日: | 2021-03-18 |
公开(公告)号: | CN112905566A | 公开(公告)日: | 2021-06-04 |
发明(设计)人: | 王晓辉;李洪霞;沈伟平 | 申请(专利权)人: | 苏州科达科技股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/2455 |
代理公司: | 北京三聚阳光知识产权代理有限公司 11250 | 代理人: | 张琳琳 |
地址: | 215011 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
获取实时待存储数据;
对所述实时待存储数据进行聚合处理,以得到实时存储数据;
基于历史存储数据的时间戳信息,提取满足预设时间条件的历史存储数据;
对提取出的所述历史存储数据进行二次聚合处理,以得到目标历史存储数据,所述实时存储数据与所述历史存储数据用于数据查询。
2.根据权利要求1所述的方法,其特征在于,所述对所述实时待存储数据进行聚合处理,得到实时存储数据,包括:
获取第一查询颗粒度;
基于所述第一查询颗粒度,对所述实时待存储数据进行聚合处理,以得到所述实时存储数据。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第一查询颗粒度,对所述实时待存储数据进行聚合处理,得到所述实时存储数据,包括:
从缓存空间内提取所述第一查询颗粒度间隔内的所有所述实时待存储数据;
基于所述第一查询颗粒度对应的时间戳,利用所有所述实时待存储数据的维度进行聚合处理,以得到所述实时存储数据。
4.根据权利要求3所述的方法,其特征在于,所述基于所述第一查询颗粒度,对所述实时待存储数据进行聚合处理,以得到所述实时存储数据,还包括:
对聚合处理后的所述实时待存储数据进行统计分析,得到所述实时存储数据;
利用预设文件系统对所述实时存储数据进行存储。
5.根据权利要求2所述的方法,其特征在于,所述对提取出的所述历史存储数据进行二次聚合处理,得到目标历史存储数据,所述实时存储数据与所述历史存储数据用于数据查询,包括:
基于第二查询颗粒度,对提取出的所述历史存储数据进行二次聚合处理,以得到目标历史存储数据,所述第二查询颗粒度大于所述第一查询颗粒度。
6.根据权利要求1-5中任一项所述的方法,其特征在于,所述方法还包括:
获取数据查询请求,所述数据查询请求中携带有查询时间;
基于所述查询时间,从所述实时存储数据或所述目标历史存储数据中提取相应的数据,得到查询数据。
7.根据权利要求6所述的方法,其特征在于,所述基于所述查询时间,从所述实时存储数据或所述目标历史存储数据中提取相应的数据,得到查询数据,包括:
比较所述查询时间与当前时间确定查询对象,所述查询对象为所述实时存储数据或所述历史存储数据;
利用所述查询对象以及所述查询时间,提取所述查询数据。
8.一种数据处理装置,其特征在于,所述装置包括:
获取模块,用于获取实时待存储数据;
第一聚合模块,用于对所述实时待存储数据进行聚合处理,以得到实时存储数据;
提取模块,用于基于历史存储数据的时间戳信息,提取满足预设时间条件的历史存储数据;
第二聚合模块,用于对提取出的所述历史存储数据进行二次聚合处理,以得到目标历史存储数据,所述实时存储数据与所述历史存储数据用于数据查询。
9.一种电子设备,其特征在于,包括:
存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行权利要求1-7中任一项所述的数据处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使计算机执行权利要求1-7中任一项所述的数据处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州科达科技股份有限公司,未经苏州科达科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110291876.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种控制方法及电子设备
- 下一篇:高速放行的道闸