[发明专利]数据处理方法及装置、数据查询方法及装置、网络设备

权利要求书

1.一种数据处理方法，其特征在于，包括：

采集待处理的原始数据；

对所述原始数据按照指定格式进行结构化处理，得到结构化数据；

对所述结构化数据进行聚合处理以得到聚合数据，将所述聚合数据作为所述原始数据处理后的数据；其中，所述聚合数据的数据量小于所述原始数据的数据量。

2.根据权利要求1所述的方法，其特征在于，所述对所述原始数据按照指定格式进行结构化处理，得到结构化数据的步骤，包括：

从所述原始数据中查找与预设结构化表中的各字段对应的数据，并将查找到的所述数据填写在所述预设结构化表中对应的字段处；

将经填写的所述预设结构化表作为结构化数据。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

如果从所述原始数据中未查找到与所述预设结构化表中指定的关键字段对应的数据，丢弃所述原始数据。

4.根据权利要求2所述的方法，其特征在于，所述对所述结构化数据进行聚合处理，得到聚合数据的步骤，包括：

将所述结构化数据进行分组，得到至少一个数据组；其中，同一个所述数据组中的多条结构化数据在预设字段对应填入的数据相同；

对于每个所述数据组，将该数据组中的多条结构化数据进行聚合，得到该数据组对应的聚合数据；其中，所述聚合数据为该数据组中的多条结构化数据中选取的一条结构化数据，或者，所述聚合数据为该数据组中的多条结构化数据按照预设算法形成的一条新的结构化数据。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

将得到的所述聚合数据存储于非关系型数据库中；所述非关系型数据库部署于服务器集群上。

6.根据权利要求1至5任一项所述的方法，其特征在于，所述采集待处理的原始数据的步骤，包括：

按照预设频率从部署有计费产品的服务器获取待处理的原始数据；其中，所述原始数据为所述服务器记录的所述计费产品的资源消耗数据；所述服务器的数量为一个或多个。

7.一种数据查询方法，其特征在于，包括：

如果接收到数据查询请求，从预设的数据库中查找与所述数据查询请求对应的聚合数据；其中，所述数据库中存储有如权利要求1至6任一项所述的数据处理方法得到的聚合数据；

将查找到的所述聚合数据反馈给所述数据查询请求的请求方。

8.一种数据处理装置，其特征在于，包括：

数据采集模块，用于采集待处理的原始数据；

数据结构化模块，用于对所述原始数据按照指定格式进行结构化处理，得到结构化数据；

数据聚合模块，用于对所述结构化数据进行聚合处理以得到聚合数据，将所述聚合数据作为所述原始数据处理后的数据；其中，所述聚合数据的数据量小于所述原始数据的数据量。

9.一种数据查询装置，其特征在于，包括：

数据查找模块，用于如果接收到数据查询请求，从预设的数据库中查找与所述数据查询请求对应的聚合数据；其中，所述数据库中存储有如权利要求1至6任一项所述的数据处理方法得到的聚合数据；

数据反馈模块，用于将查找到的所述聚合数据反馈给所述数据查询请求的请求方。

10.一种网络设备，其特征在于，包括处理器和机器可读存储介质，所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令，所述处理器执行所述机器可执行指令以实现权利要求1至6任一项所述的方法，或者所述处理器执行所述机器可执行指令以实现权利要求7所述的方法。

11.一种机器可读存储介质，其特征在于，所述机器可读存储介质存储有机器可执行指令，所述机器可执行指令在被处理器调用和执行时，所述机器可执行指令促使所述处理器实现权利要求1至6任一项所述的方法，或者，所述机器可执行指令促使所述处理器实现权利要求7所述的方法。