[发明专利]数据的处理方法、装置及系统有效
申请号: | 201210062045.2 | 申请日: | 2012-03-09 |
公开(公告)号: | CN103309873B | 公开(公告)日: | 2018-06-12 |
发明(设计)人: | 许泰清;周志衡;徐磊石 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 吴贵明;余刚 |
地址: | 英属开曼群岛大开*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 装置及系统 备份数据 组操作 服务器 服务器接收 服务器系统 处理压力 时间窗口 客户端 预设 内存 申请 数据库 筛选 输出 保存 | ||
1.一种数据的处理方法,其特征在于,包括:
服务器接收客户端输出的一组或多组操作数据;
所述服务器按照预设的时间窗口长度对每组操作数据中的数据进行筛选,以获取一组或多组备份数据;
将所有的备份数据保存至所述服务器的内存中,其中,所述服务器保存的备份数据在所述内存中以二叉树的结构进行存储;
所述服务器按照预设的时间窗口长度对每组操作数据中的数据进行筛选,以获取一组或多组备份数据包括:
判断每组操作数据中连续的两个数据之间的时间差是否处于所述预设的时间窗口长度之内,其中,
在所述时间差处于所述预设的时间窗口长度之内的情况下,确定所述两个数据为该组操作数据对应的备份数据;
在所述时间差处于所述预设的时间窗口长度之外的情况下,抛弃所述两个数据;
在将所有的备份数据保存至所述服务器的内存中之后,所述方法还包括:
接收查询条件,并根据所述查询条件中的查询属性以及计算函数在所述内存中进行查询操作,以获取所述一组或多组备份数据。
2.根据权利要求1所述的方法,其特征在于,每组备份数据的属性包括:关键字、数据字段、时间窗口以及计算函数,且每组备份数据对应唯一的一类计算函数,所述计算函数按照类型划分包括普通算术函数、比较函数以及统计函数,其中,在将所有的备份数据保存至所述服务器的内存中之后,所述方法还包括:
接收用于查询的查询条件,所述查询条件包括:查询时间、查询属性对以及复杂计算函数,所述查询属性对包括关键字和数据字段;
根据计算函数的类型对所述复杂计算函数进行划分,得到一类或多类计算函数;
根据查询属性对以及当前得到的每类计算函数在内存中进行查询操作,以获取N组备份数据;
对获取到的每组备份数据按照其对应的一类计算函数进行计算处理,并对计算结果进行合并以获取计算结果。
3.根据权利要求2所述的方法,其特征在于,对获取到的每组备份数据按照其对应的计算函数进行计算处理,并对计算结果进行合并以获取计算结果包括:
步骤A,获取第一组备份数据中每个数据的时间窗口;
步骤B,根据所述时间窗口对所述查询时间进行划分,以获取一个或多个连续的时间区间作为有效时间区间;
步骤C,通过所述第一组备份数据对应的计算函数对每个有效时间区间内的数据进行计算处理,并对每个数据的计算结果进行合计得到所述第一组备份数据的第一处理结果;
步骤D,对获取到的每组备份数据执行步骤A到步骤C,以获取每组备份数据的处理结果,将所有的处理结果进行合并后得到所述计算结果。
4.根据权利要求3所述的方法,其特征在于,在根据所述时间窗口对所述查询时间进行划分之前,所述方法还包括:
判断所述查询时间是否小于等于第一阈值,其中,
在所述查询时间小于等于所述第一阈值的情况下,执行根据所述时间窗口对所述查询时间进行划分;
在所述查询时间大于所述第一阈值的情况下,返回查询结果为空。
5.根据权利要求1所述的方法,其特征在于,在将所有的备份数据保存至所述服务器的内存之后,所述方法还包括:
判断所述备份数据的数目是否大于第二阈值,其中,
在所述备份数据的数目大于第二阈值的情况下,所述服务器按照所述内存中所有备份数据的保存时间,依次删除保存时间最早的备份数据,直至内存中保存的备份数据的数目小于等于所述第二阈值;
在所述备份数据的数目小于等于第二阈值的情况下,保持所述内存中备份数据的数目不变。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201210062045.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多元遥感数据统一访问的方法及系统
- 下一篇:程序测试方法及平台