[发明专利]一种网络日志数据管理方法、系统及装置

权利要求书

1、一种网络日志数据管理方法，应用于包括日志处理器、数据库、日志管理装置和WEB服务器的系统中，其特征在于，所述方法包括以下步骤：

所述日志处理器从网络报文和日志文件获取日志数据，并存储于所述数据库；

所述日志管理装置统一对所述日志数据进行存储、读取或清理，使所述WEB服务器从所述日志管理装置读取日志数据，对所述日志数据进行操作。

2、如权利要求1所述的方法，其特征在于，所述日志管理装置统一对所述日志数据进行存储、读取或清理，具体包括：

对数据库中的日志数据所使用的空间进行检测；

根据空间使用情况对空间使用增长趋势进行分析和预测；

根据分析和预测结果及预定义策略或用户自定义的管理策略执行存储、读取或清理操作。

3、如权利要求2所述的方法，其特征在于，所述对数据库中的日志数据所使用的空间进行检测，具体包括：

按照预设周期定时启动空间检测操作，在每个空间检测执行周期开始时检测数据库使用情况和磁盘使用情况，将检测结果存入数据库中；

所述对空间使用增长趋势进行分析和预测，具体包括：

根据空间检测结果，分析当前日志数据空间状态，并结合历史信息通过增量分析和基线分析预测空间变化趋势；

所述分析和预测结果及预定义策略或用户自定义的管理策略执行存储、读取或清理操作，具体包括：

在接收到日志空间分析/预测结果后，根据结果在策略列表中查找符合条件的策略并执行。

4、如权利要求3所述的方法，其特征在于，所述检测数据库使用情况，具体包括：

查询数据库的大小、数据库已使用空间和数据库位置；

所述检测磁盘使用情况，具体包括：

根据数据库位置和转储路径，确定需要检测的磁盘分卷；检测所述分卷的容量大小、分卷已使用空间的大小。

5、如权利要求3所述的方法，其特征在于，所述结合历史信息通过增量分析和基线分析预测空间变化趋势，具体包括：

根据空间检测结果判断数据库当前空间使用量是否达到阈值，如果达到，将空间信息提交策略执行模块；

如果没有达到，获取周期内数据库的变化量，读取增量基线数据，根据基线判断增量值是否在正常范围内，如果不在，发出数据空间使用量增量告警，如果在，读取数据空间使用量历史值，使用本次空间信息和历史信息进行空间趋势预测，将预测结果提交策略执行模块。

6、一种网络日志数据管理系统，其特征在于，包括日志处理器、数据库、WEB服务器和日志管理装置；

所述日志处理器，用于从网络报文和日志文件获取日志数据，并存储于所述数据库；

所述日志管理装置，与所述日志处理器、所述数据库和所述WEB服务器连接，用于对所述日志数据进行存储、读取或清理；

所述WEB服务器，与所述日志管理装置连接，用于从所述日志管理模块读取日志数据，对所述日志数据进行操作。

7、如权利要求6所述的系统，其特征在于，还包括：

压缩文件存储器，与所述数据库和所述日志管理装置连接，用于存储数据库中的日志数据转换成的压缩文件。

8、一种日志管理装置，应用于包括日志处理器、数据库和WEB服务器的系统中，其特征在于，所述装置包括：

数据查询模块，用于通过日志数据操作接口查询数据库中的日志数据；

空间管理模块，用于通过日志数据操作接口操作原始日志数据，对数据库中的日志数据所使用的空间进行检测，对其增长趋势进行分析和预测，根据空间使用情况，预定义策略和用户自定义的管理策略执行存储、读取或清理操作。