[发明专利]一种基于大数据的数据安全处理方法

说明书

本发明涉及一种基于大数据的数据安全处理方法，所述方法包括：步骤S1：从终端获取大数据；步骤S2：进行大数据存储定位；步骤S3：对大数据进行透明过滤后存储在所定位的大数据节点中。本发明在集合的扩充中采用动静结合的选择过程；通过第三方固件统一管理，提高了过滤规则自身的安全性和调整的灵活性，可以随时根据对大数据节点的管理来动态的调整过滤规则，还设置有独立可插拔硬件的方式来设置透明过滤层；通过可插拔硬件在来保障终端设备的安全性。

【技术领域】

本发明属于数据安全领域，尤其涉及一种基于大数据的数据安全处理方法。

【背景技术】

大数据是指所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。云计算是一种基于互联网的超级计算方式，是对并行处理、分布式处理和网格计算的延伸。可以认为，云计算不仅是一种新的计算模型，同时是一种新的共享基础架构的方式。云计算面向超大规模的分布式用户环境，其主要功能是提供快捷安全的云端数据存储和网络服务。大数据的信息隐私保护是云计算大数据快速发展和运用的重要前提。没有信息安全也就没有云服务的安全。目前，我国的大数据正处于初级阶段，对大数据信息的保护还不完善，随着大数据时代的来临，市场上迫切需要一种有效的保护大数据资产的方法。本发明提出一种基于大数据的数据安全处理方法，本发明采用无向加权图进行大数据节点的通信以及资源状况描述，采用向量进行大数据节点的全面描述，基于大数据的数据量所代表的数据特性进行大数据节点和待存储大数据之间的量化匹配；使得集合在满足总体的需求的情况下，保证集合中的每个数据节点在各特性分量上能够保持资源均衡；在集合的扩充中可以根据节点的动态使用情况进行集合的扩充；这样就完成了一个动静结合的选择过程；通过第三方固件统一管理，提高了过滤规则自身的安全性和调整的灵活性，可以随时根据对大数据节点的管理来动态的调整过滤规则，还设置有独立可插拔硬件的方式来设置透明过滤层；通过可插拔硬件在来保障终端设备的安全性。

【发明内容】

为了解决现有技术中的上述问题，本发明提出了一种基于大数据的数据安全处理方法，所述方法包含：

步骤S1：从终端获取大数据；

步骤S2：进行大数据存储定位；

步骤S3：对大数据进行透明过滤后存储在所定位的大数据节点中。

进一步的，所述步骤S2具体为：选择进行本次大数据存储的大数据节点，获取所述大数据节点的物理地址，进行逻辑地址和大数据节点的物理地址映射。

进一步的，所述选择进行本次大数据存储的大数据节点，具体为：判断是否已经存在面向所述大数据处理目标的大数据节点，如果是，将所述面向所述大数据处理目标的大数据节点的集合作为已存储大数据节点集合；判断所述已存储大数据节点集合是否能够满足本次大数据存储请求，如果是，则从所述已存储大数据节点集合中选择最优的大数据节点，基于所述最优的大数据节点进行所述大数据的存储；否则，选择一大数据节点加入所述已存储大数据节点集合，并将基于所述所选择的大数据节点进行所述大数据的存储。

进一步的，所述判断所述已存储大数据节点集合是否能够满足本次大数据存储请求，具体为：确定增加本次大数据后，集合中的所有大数据节点的节点特性是否能够满足增加本次大数据后的大数据总量的需求，如果满足，则判断结果为是，否则，判断结果为否。

进一步的，所述从所述已存储大数据节点集合中选择最优的大数据节点，具体为：获取集合中每个大数据节点的特征向量；依次将所述大数据的数据量增加到存储量向量对应元素上以获取临时存储量向量，计算每个临时存储量向量和每个特征向量之间的子最优值，基于子最优值计算最优值，并选择最优值最小的临时存储量向量对应的大数据节点作为最优大数据节点。