[发明专利]基于大数据分析的清理规则获取方法及系统

权利要求书

1.一种基于大数据分析的清理规则获取方法，包括：

对大数据进行收集，得到清理日志文件；

对所述清理日志文件进行分析处理，得到与系统性能相关联的清理目标结果；

根据所述清理目标结果对清理规则进行更新，将更新后的清理规则下发给清理引擎以及清理客户端，以便清理引擎以及清理客户端依据所述更新后的清理规则清理存储空间。

2.根据权利要求1所述的方法，其中，所述与系统性能相关联的清理目标结果具体包括：目标清理空间占比信息和/或目标清理文件信息和/或目标清理目录信息。

3.根据权利要求1所述的方法，其中，所述根据所述清理目标结果对清理规则进行更新，将更新后的清理规则下发给清理引擎以及清理客户端具体包括：

将所述清理目标结果发送给清理运营平台，以便所述清理运营平台根据预制的清理规则模板和所述清理目标结果完成清理规则的更新处理，并将更新后的清理规则下发给清理引擎以及清理客户端。

4.根据权利要求1-3中任一项所述的方法，其中，所述对所述清理日志文件进行分析处理进一步包括：

对所述清理日志文件进行切字段处理，得到各个日志字段，针对于所述各个日志字段进行分析处理。

5.根据权利要求1-4中任一项所述的方法，其中，所述对所述清理日志文件进行分析处理，得到与系统性能相关联的清理目标结果进一步包括：

对所述清理日志文件进行统计，得到日志统计结果；所述日志统计结果包括：清理日志文件对应的终端类型信息和/或清理文件信息和/或清理目录信息；

根据所述日志统计结果，得到与系统性能相关联的清理目标结果；

其中，所述终端类型信息依据终端的操作系统信息和/或系统版本信息和/或厂商信息确定。

6.根据权利要求5所述的方法，其中，所述方法基于ELK集群实现；则所述方法进一步包括：将所述日志统计结果进行展现。

7.根据权利要求6所述的方法，其中，所述对大数据进行收集，得到清理日志文件具体包括：

监听Hive服务器处理得到的清理日志文件；其中，所述Hive服务器从HDFS服务器中拉取原始清理日志文件进行处理。

8.一种基于大数据分析的清理规则获取系统，包括：

收集模块，适于对大数据进行收集，得到清理日志文件；

分析模块，适于对所述清理日志文件进行分析处理，得到与系统性能相关联的清理目标结果；

更新模块，适于根据所述清理目标结果对清理规则进行更新，将更新后的清理规则下发给清理引擎以及清理客户端，以便清理引擎以及清理客户端依据所述更新后的清理规则清理存储空间。

9.一种计算设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-7中任一项所述的基于大数据分析的清理规则获取方法对应的操作。

10.一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行如权利要求1-7中任一项所述的基于大数据分析的清理规则获取方法对应的操作。