[发明专利]数据处理和查询方法及装置在审
申请号: | 201610875245.8 | 申请日: | 2016-09-30 |
公开(公告)号: | CN107885752A | 公开(公告)日: | 2018-04-06 |
发明(设计)人: | 李国忠 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京市惠诚律师事务所11353 | 代理人: | 刘子敬 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 查询 方法 装置 | ||
1.一种数据处理方法,其特征在于,包括:
对实时流数据进行局部合并,得到至少一个局部数据;
将所述局部数据进行缓存;
在满足预设的汇总条件时,对当前缓存的数据进行汇总,以得到汇总数据;其中所述当前缓存的数据至少包括所述局部数据。
2.根据权利要求1所述的方法,其特征在于,所述当前缓存的数据均为局部数据。
3.根据权利要求1所述的方法,其特征在于,所述当前缓存的数据中包括上次满足所述汇总条件时得到的汇总数据以及当前汇总条件下的局部数据。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述在满足预设的汇总条件时,对当前缓存的数据进行汇总,以得到汇总数据之后,还包括:
清除经过汇总后的所述局部数据;
缓存汇总得到的所述汇总数据。
5.根据权利要求4所述的方法,其特征在于,所述对实施流数据进行局部合并,得到至少一个局部数据,包括:
将预设的时间间隔内的所有流数据进行合并,以得到所述局部数据。
6.根据权利要求5所述的方法,其特征在于,所述汇总条件为预设的时间长度或者缓存的数据个数。
7.一种数据查询方法,其特征在于,包括:
接收客户端发送的查询请求;
查询接收到所述查询请求时的汇总数据以及局部数据;其中,所述汇总数据为在满足预设的汇总条件时,对当前缓存的数据进行汇总得到的数据,所述局部数据为对实时流数据进行局部合并得到的数据;
将接收到所述查询请求时的汇总数据以及局部数据进行聚合,以得到聚合数据;
将所述聚合数据发送给所述客户端。
8.一种数据查询方法,其特征在于,包括:
接收客户端发送的查询请求;
查询接收到所述查询请求时的汇总数据以及局部数据;其中,所述汇总数据为在满足预设的汇总条件时,对当前缓存的数据进行汇总得到的数据,所述局部数据为对实时流数据进行局部合并得到的数据;
将接收到所述查询请求时的汇总数据以及局部数据发送给所述客户端。
9.根据权利要求8所述的方法,其特征在于,所述将接收到所述查询请求时的汇总数据以及局部数据发送给所述客户端之后,还包括:
接收所述客户端返回的所述聚合数据,所述聚合数据是由所述客户端对接收到所述查询请求时的汇总数据以及局部数据进行聚合得到的。
10.一种数据查询方法,其特征在于,包括:
向存储端发送查询请求,以使所述存储端根据所述查询请求查询接收到所述查询请求时的汇总数据以及局部数据;其中,所述汇总数据为在满足预设的汇总条件时,对当前缓存的数据进行汇总得到的数据,所述局部数据为对实时流数据进行局部合并得到的数据;
接收所述存储端发送的所述汇总数据以及所述局部数据;
将所述汇总数据以及所述局部数据进行聚合得到聚合数据。
11.根据权利要求10所述的方法,其特征在于,所述将所述汇总数据以及所述局部数据进行聚合得到聚合数据之后,包括:
将所述聚合数据发送给所述存储端进行存储。
12.一种数据处理装置,其特征在于,包括:
局部合并模块,用于对实时流数据进行局部合并,得到至少一个局部数据;
缓存模块,用于将所述局部数据进行缓存;
汇总模块,用于在满足预设的汇总条件时,对当前缓存的数据进行汇总,以得到汇总数据;其中所述当前缓存的数据至少包括所述局部数据。
13.一种数据查询装置,其特征在于,包括:
接收模块,用于接收客户端发送的查询请求;
查询模块,用于查询接收到所述查询请求时的汇总数据以及局部数据;其中,所述汇总数据为在满足预设的汇总条件时,对当前缓存的数据进行汇总得到的数据,所述局部数据为对实时流数据进行局部合并得到的数据;
聚合模块,用于将接收到所述查询请求时的汇总数据以及局部数据进行聚合,以得到聚合数据;
发送模块,用于将所述聚合数据发送给所述客户端。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610875245.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:具有引线功能的电缆桥架
- 下一篇:一种通讯电缆安装固定装置