[发明专利]一种基于大数据的数据安全处理方法

说明书

本发明涉及数据处理技术领域，具体涉及一种基于大数据的数据安全处理方法，包括数据采集模块对各设备终端的数据进行采集；数据预处理模块对数据采集模块采集的数据进行信息筛选；数据缓存模块将经由数据预处理模块处理后的数据进行缓存；映射模块对数据缓存模块中的数据进行映射；将映射模块中的数据信息储存至虚拟盘中；虚拟盘中的数据过滤模块对数据进行安全处理。本发明的有益效果：数据预处理模块对数据采集模块采集的数据进行初步过滤，将其中关联度较低的信息剔除，这样保证了高关联度数据信息能够优先处理，避免无用数据的干涉，通过映射模块对数据进行映射处理，这样能够使系统云端能够及时调取出数据信息。

技术领域

本发明涉及数据处理技术领域，具体涉及一种基于大数据的数据安全处理方法。

背景技术

大数据是指所涉及的资料量规模巨大到无法透过目前主流软件工具，在合理时间内达到撷取、管理、处理、并整理成为帮助企业经营决策更积极目的的资讯。云计算是一种基于互联网的超级计算方式，是对并行处理、分布式处理和网格计算的延伸。可以认为，云计算不仅是一种新的计算模型，同时是一种新的共享基础架构的方式。云计算面向超大规模的分布式用户环境，其主要功能是提供快捷安全的云端数据存储和网络服务。大数据的信息隐私保护是云计算大数据快速发展和运用的重要前提。没有信息安全也就没有云服务的安全。目前，我国的大数据正处于初级阶段，对大数据信息的保护还不完善，随着大数据时代的来临，市场上迫切需要一种有效的保护大数据资产的方法。

发明内容

本发明的目的在于克服现有技术中存在的问题，提供一种基于大数据的数据安全处理方法，它可以实现至少一定程度上解决现有技术的问题。

为实现上述技术目的，达到上述技术效果，本发明是通过以下技术方案实现的：

一种基于大数据的数据安全处理方法，包括如下步骤：

步骤1)数据采集模块对各设备终端的数据进行采集；

步骤2)数据预处理模块对数据采集模块采集的数据进行信息筛选，将其中关联度较低的数据剔除，保留关联度较高的数据；

步骤3)数据缓存模块将经由数据预处理模块处理后的数据进行缓存；

步骤4)映射模块对数据缓存模块中的数据进行映射；

步骤5)将映射模块中的数据信息储存至虚拟盘中；

步骤6)虚拟盘中的数据过滤模块设置数据过滤条件，然后根据过滤条件对数据进行过滤，并对数据进行安全处理。

进一步地，所述数据采集模块包括数据采集单元、数据分类单元，所述数据采集单元用于采集数据信息，所述数据分类单元用于对数据采集单元中的数据信息进行分类。

进一步地，所述步骤4)中数据的映射方式为基于物理地址的映射方法。

进一步地，所述设备终端包括各种基于移动网络的移动终端。

进一步地，还包括：

步骤7)经由数据过滤模块处理后的数据由透明过滤层对数据设置过滤条件，再根据过滤条件进行再过滤，然后缓存至虚拟盘中。

进一步地，所述步骤2中的信息筛选包括：

步骤2.1)将数据信息按相似度进行打包，并分成多个数据包；

步骤2.2)对上述步骤中的数据包首字符进行提取并生成标签；

步骤2.3)将上述步骤中的标签按关联度进行分类，关联度较低的标签对应的数据包删除，保留关联度较高的标签所对应的数据包。