[发明专利]时序数据聚合方法、装置、计算机设备和存储介质

说明书

本申请涉及一种时序数据聚合方法、装置、计算机设备和存储介质，其中，该方法包括：根据聚合要求对原始时序数据表进行配置，得到用户配置结果，再获取聚合的起始时间点，根据用户配置结果和起始时间点生成查询语句sql；并根据查询语句sql进行查询，得到以时间为索引的第一聚合目的表；根据用户指定的聚合时间单位和用户配置结果对第一聚合目的表进行聚合处理，得到聚合后的第二聚合目的表；将第二聚合目的表存储至用户指定聚合时间单位的数据表。通过本申请，解决了相关技术中存在需要用户进行复杂的配置，且不能指定聚合时间单位进行聚合的问题。实现了用户通过简单的配置，即能指定聚合时间单位进行聚合的效果。

技术领域

本申请涉及大数据处理领域，特别是涉及一种时序数据聚合方法、装置、计算机设备和存储介质。

背景技术

在一些互联网系统中，随着时间的变化，会产生源源不断的数据。这些数据依赖于时间而变化，可以用数值来反映其变化程度的数据就叫做时序数据，如网络流量数据、用户访问数据、日志数据等。通过对时序数据以各种时间单位进行聚合，可以对一段连续时间内的时序数据聚合结果进行数据分析或者处理。将聚合后的时序数据储存在聚合时间单位的数据表中，从而减轻数据库以及系统面对过大数据量的压力。

目前，时序数据的聚合有两种主要的方式：一种是通过调用程序来处理，需要对不同数据库进行适配，这种方式不能通用，所以对用户而言配置复杂。另一种是部分数据库独立或者借助插件实现数据的聚合处理方式，这种在数据库层面直接进行的聚合，不能指定聚合时间单位。

针对相关技术中，时序数据的聚合中存在需要用户进行复杂的配置，且不能指定聚合时间单位进行聚合的问题，目前还没有提出有效的解决方案。

发明内容

在本申请中提供了一种时序数据聚合方法、装置、计算机设备和存储介质，以解决相关技术中时序数据的聚合中存在需要用户进行复杂的配置，且不能指定聚合时间单位的问题。

第一个方面，在本实施例中提供了一种时序数据聚合方法，包括：

根据聚合要求对原始时序数据表进行配置，得到用户配置结果；

获取聚合的起始时间点，根据所述用户配置结果和所述起始时间点生成查询语句sql；并根据所述查询语句sql进行查询，得到以时间为索引的第一聚合目的表；

根据用户指定的聚合时间单位和所述用户配置结果对所述第一聚合目的表进行聚合处理，得到聚合后的第二聚合目的表，将所述第二聚合目的表存储至所述用户指定聚合时间单位的数据表。

在其中的一些实施例中，所述获取聚合的起始时间点，包括：

判断所述第一聚合目的表中，是否存在上次聚合记录；

如果存在所述上次聚合记录，则获取所述第一聚合目的表中上次聚合的最晚时间点；将所述第一聚合目的表中上次聚合最晚时间点与所述用户指定聚合时间单位以及时间对齐格式进行时间对齐处理，得到所述起始时间点；

如果不存在所述上次聚合记录，则获取所述原始时序数据表中的最早时间点；将所述原始时序数据表中的最早时间点与所述用户指定聚合时间单位以及时间对齐格式进行时间对齐处理，得到所述起始时间点。

在其中的一些实施例中，所述将所述第一聚合目的表中上次聚合最晚时间点与所述用户指定聚合时间单位以及时间对齐格式进行时间对齐处理，包括：

根据所述用户指定聚合时间单位，确定所述第一聚合目的表中上次聚合最晚时间点所在的时间范围；

根据所述时间对齐格式要求，左对齐将所述第一聚合目的表中上次聚合最晚时间点聚合到所述时间范围的上一个时间点，右对齐将所述第一聚合目的表中上次聚合最晚时间点聚合到所述时间范围的下一个时间点。