[发明专利]一种温数据存储方法

权利要求书

1.一种温数据存储方法，其特征在于，具体包括以下步骤：

S1、每日通过服务器以及相关平台录入数据；

S2、根据录入数据时的日期对数据赋值n；

S3、将数据以Parquet格式存入HDFS；

S4、对当日日期进行赋值，设置成m，通过算法算出(m-n)的值，即为数据关联的关键词，将关键词关联数据；

S5、设置阈值a；

S6、将数据关联的关键词(m-n)与阈值a进行大小比较，当出现(m-n)较大时，对数据进行清除处理，当出现a较大时，不对数据进行处理；

S7、通过Spark从HDFS通过不同的查询条件读取大规模的数据进行分析计算。

2.根据权利要求1所述的一种温数据存储方法，其特征在于，在进行所述S1步骤前先对数据进行检测，检测数据中是否有与现有数据相重复的，检测到重复的数据不予录入。

3.根据权利要求2所述的一种温数据存储方法，其特征在于，在检测到重复数据后，根据当日的日期重新对存储中的现有数据进行m的赋值。

4.根据权利要求1所述的一种温数据存储方法，其特征在于，在进行所述S8步骤时，根据数据的索引次数得出数据的得分值，将数据的得分值进行加权处理，得到每个物品排序权重值，根据权重值对数据进行分组。