[发明专利]一种网络测量数据的存储方法及系统

权利要求书

1.一种网络测量数据的存储方法，其特征在于，所述方法包括：

获取待存储的网络测量数据；

根据预设的数据分类算法，对所述网络测量数据进行分类处理，得到至少一个第一子数据和每个第一子数据对应的分类信息，所述分类信息为数据类型、未分类或脏数据；

对于所述每个第一子数据，根据该第一子数据对应的分类信息，确定对应的存储策略，根据该第一子数据对应的存储策略，对该第一子数据进行存储。

2.根据权利要求1所述的方法，其特征在于，当所述第一子数据的分类信息为数据类型时，所述根据该第一子数据对应的分类信息，确定所述第一子数据对应的存储策略，包括：根据预先存储的存储策略和数据类型的对应关系，确定该第一子数据的数据类型对应的存储策略，所述存储策略包括第一次缓存策略、第二次缓存策略和持久化策略中的至少一项；

当所述第一子数据的分类信息为未分类时，所述根据该第一子数据对应的分类信息，确定所述第一子数据对应的存储策略，包括：根据预设的存储策略选择规则，确定所述未分类数据对应的存储策略；

当所述第一子数据的分类信息为脏数据时，所述根据该第一子数据对应的分类信息，确定所述第一子数据对应的存储策略，包括：将预设的脏数据存储策略作为该第一子数据的存储策略，所述脏数据存储策略为将所述脏数据存储到脏数据列表，并设定所述第一子数据的删除时限。

3.根据权利要求1或2所述的方法，其特征在于，当所述第一子数据的分类信息为数据类型时，所述对于所述每个第一子数据，根据该第一子数据对应的分类信息，确定所述第一子数据对应的存储策略，根据所述第一子数据对应的存储策略，对所述第一子数据进行存储，包括：

根据预先存储的第一次缓存设备和数据类型的对应关系，确定该第一子数据的数据类型对应的第一次缓存设备，将该第一子数据存储到该第一子数据的数据类型对应的第一次缓存设备中；

根据各持久化设备的存储规则，将该第一子数据划分为至少一个第二子数据，分别将每个第二子数据存储到对应的持久化设备的最近缓存设备中；

将所述第二子数据逐条存储到对应的持久化设备中。

4.根据权利要求1所述的方法，其特征在于，所述根据预设的数据分类算法，对所述网络测量数据进行分类处理，包括：

根据预设的数据分类算法，计算所述网络测量数据与预设的各数据类型的相似度，将相似度大于预设阈值的数据类型作为所述网络测量数据的数据类型。

5.根据权利要求2所述的方法，其特征在于，所述根据预设的存储策略选择规则，确定所述未分类数据对应的存储策略，包括：

确定与所述未分类数据的相似度最大的预设数目个数据类型，获取确定出的数据类型对应的存储策略；

基于获取到的每个存储策略，分别对所述未分类数据进行模拟存储，并确定所述每个存储策略对应的存储效率；

将所述存储效率最高的存储策略作为所述未分类数据的存储策略。

6.一种网络测量数据的存储装置，其特征在于，所述装置包括：

数据采集模块，用于获取待存储的网络测量数据；

分类模块，用于根据预设的数据分类算法，对所述网络测量数据进行分类处理，得到至少一个第一子数据和每个第一子数据对应的分类信息，所述分类信息为数据类型、未分类或脏数据；

存储模块，用于对于所述每个第一子数据，根据该第一子数据对应的分类信息，确定对应的存储策略，根据该第一子数据对应的存储策略，对该第一子数据进行存储。

7.根据权利要求6所述的装置，其特征在于，当所述第一子数据的分类信息为数据类型时，所述存储模块，还用于：根据预先存储的存储策略和数据类型的对应关系，确定该第一子数据的数据类型对应的存储策略，所述存储策略包括第一次缓存策略、第二次缓存策略和持久化策略中的至少一项；

当所述第一子数据的分类信息为未分类时，所述存储模块，还用于：根据预设的存储策略选择规则，确定所述未分类数据对应的存储策略；

当所述第一子数据的分类信息为脏数据时，所述存储模块，还用于：将预设的脏数据存储策略作为该第一子数据的存储策略，所述脏数据存储策略为将所述脏数据存储到脏数据列表，并设定所述第一子数据的删除时限。