[发明专利]一种基于大数据的数据安全处理方法

权利要求书

1.一种基于大数据的数据安全处理方法，其特征在于，所述方法包含：

步骤S1：从终端获取大数据；

步骤S2：进行大数据存储定位；

步骤S3：对大数据进行透明过滤后存储在所定位的大数据节点中；

所述步骤S2具体为：选择进行本次大数据存储的大数据节点，获取所述大数据节点的物理地址，进行逻辑地址和大数据节点的物理地址映射；

所述选择进行本次大数据存储的大数据节点，具体为：判断是否已经存在面向所述大数据处理目标的大数据节点，如果是，将所述面向所述大数据处理目标的大数据节点的集合作为已存储大数据节点集合；判断所述已存储大数据节点集合是否能够满足本次大数据存储请求，如果是，则从所述已存储大数据节点集合中选择最优的大数据节点，基于所述最优的大数据节点进行所述大数据的存储；否则，选择一大数据节点加入所述已存储大数据节点集合，并将基于所选择的大数据节点进行所述大数据的存储；

所述从所述已存储大数据节点集合中选择最优的大数据节点，具体为：获取集合中每个大数据节点的特征向量；依次将所述大数据的数据量增加到存储量向量对应元素上以获取临时存储量向量，计算每个临时存储量向量和每个特征向量之间的子最优值，基于子最优值计算最优值，并选择最优值最小的临时存储量向量对应的大数据节点作为最优大数据节点；

所述步骤S3具体为：设置透明过滤层，基于大数据节点的安全策略进行透明过滤规则的获取，将获取的过滤规则设置于所述透明过滤层中；将经过过滤后的大数据保存在所定位的大数据节点中；将所述透明过滤层设置在终端侧；透明过滤规则统一保存在独立的过滤服务器中，通过大数据节点的标识从所述过滤服务器中获取和所述大数据节点对应的过滤规则；通过第三方固件统一管理。

2.根据权利要求1所述的基于大数据的数据安全处理方法，其特征在于，所述判断所述已存储大数据节点集合是否能够满足本次大数据存储请求，具体为：确定增加本次大数据后，集合中的所有大数据节点的节点特性是否能够满足增加本次大数据后的大数据总量的需求，如果满足，则判断结果为是，否则，判断结果为否。

3.根据权利要求2所述的基于大数据的数据安全处理方法，其特征在于，大数据节点的特征向量中的每个元素为该节点的一种节点特征的量化值；将特征向量表示为C＝(c₁，c₂···c_m)；其中：m为节点特征的总数量，c_i为第i种节点特征的量化值；存储量向量中的每个元素为集合中的n个大数据节点中每个节点上已存储的大数据量；可将存储量向量表示为S＝(s₁，s₂，···s_n)；其中：s_i为第i个大数据节点中已存储的大数据量；本次新增大数据的数据量为New，依次将数据量New增加到每个大数据节点上以获取n个临时存储量向量，(s_1+New，s₂，···s_n)，(s₁，s_2+New，···s_n)，···(s₁，s₂，···s_n+New)。

4.根据权利要求3所述的基于大数据的数据安全处理方法，其特征在于，所述基于子最优值SO计算最优值OP，具体为：获取每个子最优值SO_l，并计算最优值OP：OP＝W_l×SO_l；其中W_l为第l个节点特征的权重值。

5.根据权利要求4所述的基于大数据的数据安全处理方法，其特征在于，所述选择一大数据节点加入所述已存储大数据节点集合，具体为：当所述集合为空时，选择和当前终端的通信开销最小的大数据节点；否则，基于大数据节点构成的无向加权图选择一大数据节点。

6.根据权利要求5所述的基于大数据的数据安全处理方法，其特征在于，所述基于大数据节点构成的无向加权图选择一大数据节点，具体为：获取和已存储大数据节点集合中任一大数据节点直接连接的大数据节点以构成近邻集合，从所述近邻集合中选择和已存储大数据节点集合的资源使用情况匹配的大数据节点。