[发明专利]一种基于大数据的网络安全分析系统及其分析方法

摘要

本发明公开了一种基于大数据的网络安全分析系统，包括MapReduce化单元、预处理单元、建模单元、挖掘单元、木马分析单元、异常分析单元和算法重制单元。优点在于，基于大数据的网络安全分可以保存历史数据，当发现木马特征、攻击端及被攻击端的IP等数据后，能够快速关联发现在哪个时间段、哪些用户被攻击，以及有哪些数据已经外泄。其次，在大数据环境下，数据已经大量保存。如果发现模型不能满足用户需求，只需要针对个别数据利用算法重制局部获取新数据重新建立模型。该方法省去了数据准备过程，大大缩短模型建立时间，提高异常模型检测效率，也大大减少了对单机硬件的依赖性。

主权项

一种基于大数据的网络安全分析系统，其特征在于，包括：MapReduce化单元，用于将原始数据源进行MapReduce化，输出待预处理的orcfile；预处理单元，用于根据第三方数据接口的数据指令，将待预处理的orcfile按需进行预处理并对建模单元输出待处理数据的orcfile；建模单元，根据待处理数据的orcfile和挖掘模式，建立对应的实时计算型模型；挖掘单元，用于在大数据平台进行数据挖掘并将挖掘结果输出至木马分析单元和/或异常分析单元；木马分析单元，用于利用挖掘结果对木马进行分析，并根据实时分析需要的局部数据反馈至算法重制单元；异常分析单元，用于利用挖掘结果对网络异常进行分析，并根据实时分析需要的局部数据反馈至算法重制单元；算法重制单元，用于对反馈的所需数据重新制作挖掘算法。