[发明专利]数据处理方法以及装置在审
申请号: | 202110182739.9 | 申请日: | 2021-02-10 |
公开(公告)号: | CN113297135A | 公开(公告)日: | 2021-08-24 |
发明(设计)人: | 吴兴博;胡建洪;张友东;杨成虎 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/14;G06F16/172;G06F16/18 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 李晓庆 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 以及 装置 | ||
本说明书实施例提供数据处理方法以及装置,其中所述数据处理方法包括:接收针对目标对象的待存储数据的数据存储请求,其中,所述数据存储请求中携带有待存储数据的属性信息以及目标对象的对象标签;基于待存储数据的属性信息确定所述待存储数据的创建时间戳和最新时间戳,并基于所述创建时间戳和所述最新时间戳确定数据分区策略,且根据所述数据分区策略创建数据分区;确定所述每个数据分区中所述目标对象的待存储数据,且确定所述待存储数据对应的索引数据;基于所述索引数据对应的数据分区,所述数据分区对应的目标对象以及所述目标对象的对象标签构建第一索引表,并基于所述第一索引表将每个数据分区的待存储数据进行数据存储。
技术领域
本说明书实施例涉及计算机技术领域,特别涉及一种数据处理方法。本说明书一个或者多个实施例同时涉及一种数据处理装置,一种计算设备,以及一种计算机可读存储介质。
背景技术
随着互联网或者物联网的应用越来越广泛,互联网中的检测系统或者物联网设备等,产生越来越多的基于时间序列的数据,这些数据被称为时序数据。时序数据虽然来源不同,但由于采集设备版本升级、系统升级或者采集对象由于各种原因消失,总会不断有新的时间线创建、而旧的时间线逐渐淘汰,随着数据量不断增大,导致时序数据存储效率较低,并且为后续的查询带来不便,也导致查询效率降低。
发明内容
有鉴于此,本说明书施例提供了一种数据处理方法。本说明书一个或者多个实施例同时涉及一种数据处理装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中存在的技术缺陷。
根据本说明书实施例的第一方面,提供了一种数据处理方法,包括:
接收针对目标对象的待存储数据的数据存储请求,其中,所述数据存储请求中携带有待存储数据的属性信息以及目标对象的对象标签;
基于待存储数据的属性信息确定所述待存储数据的创建时间戳和最新时间戳,并基于所述创建时间戳和所述最新时间戳确定数据分区策略,且根据所述数据分区策略创建数据分区;
确定所述每个数据分区中所述目标对象的待存储数据,且确定所述待存储数据对应的索引数据;
基于所述索引数据对应的数据分区,所述数据分区对应的目标对象以及所述目标对象的对象标签构建第一索引表,并基于所述第一索引表将每个数据分区的待存储数据进行数据存储。
根据本说明书实施例的第二方面,提供了一种数据处理装置,包括:
接收模块,被配置为接收针对目标对象的待存储数据的数据存储请求,其中,所述数据存储请求中携带有待存储数据的属性信息以及目标对象的对象标签;
创建模块,被配置为基于待存储数据的属性信息确定所述待存储数据的创建时间戳和最新时间戳,并基于所述创建时间戳和所述最新时间戳确定数据分区策略,且根据所述数据分区策略创建数据分区;
确定模块,被配置为确定所述每个数据分区中所述目标对象的待存储数据,且确定所述待存储数据对应的索引数据;
存储模块,被配置为基于所述索引数据对应的数据分区,所述数据分区对应的目标对象以及所述目标对象的对象标签构建第一索引表,并基于所述第一索引表将每个数据分区的待存储数据进行数据存储。
根据本说明书实施例的第三方面,提供了一种计算设备,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令时实现所述数据处理方法的步骤。
根据本说明书实施例的第四方面,提供了一种计算机可读存储介质,其存储有计算机可执行指令,该指令被处理器执行时实现任意一项所述数据处理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110182739.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:数据处理方法以及装置
- 下一篇:一种高速低损耗轴承套圈下料装置