[发明专利]一种集群日志的收集方法与系统

说明书

本申请提供了一种集群日志的收集方法，所述方法包括：在分布式存储集群节点中配置SaltStack并搭建SaltStack的文件服务器；选择主节点，并向选定的从节点发送传输文件指令；所述主节点接收所述从节点传输的相关日志文件。利用本申请提供的方法，能够精准快速的对选定节点的日志文件进行收集，提高了集群日志收集的效率。本申请还提供了一种集群日志的收集系统。

技术领域

本发明涉及数据收集技术领域，尤其涉及一种集群日志的收集方法与系统。

背景技术

分布式存储系统是建立在网络之上的软件系统，分布式存储系统具有高度的内聚性和透明性，随着海量数据的产生，分布式存储系统的应用越来越广泛。

分布式存储系统通常是以集群的形式组网，一般采用几个、几十个、甚至几百上千服务器节点来组成。当分布式存储系统中出现故障时就需要对该集群中节点的日志进行分析，但由于分布式系统的集群规模越来越来大，怎样将这些日志精准而快速的收集起来以便进行集中处理成了一个亟待解决的问题。

发明内容

为了解决现有技术存在的上述技术问题，本申请提供了一种集群日志的收集方法与系统，能够精准快速的对选定节点的日志文件进行收集，提高了集群日志收集的效率。

本申请提供了一种集群日志的收集方法，所述方法包括：

在分布式存储集群节点中配置SaltStack并搭建SaltStack的文件服务器；

选择主节点，并向选定的从节点发送传输文件指令；

所述主节点接收所述从节点传输的相关日志文件。

可选的，所述选择主节点，并向选定的从节点发送传输文件指令，具体为：

选择主节点，并发向所有选定的从节点发送传输文件指令。

可选的，所述方法还包括：

所述主节点在指定目录下接收所述从节点传输的所述日志文件。

可选的，所述方法还包括：

所述主节点接收所述日志文件后，对所述日志文件进行归类与打包。

可选的，所述日志文件，至少包括以下其中的一种：

软件日志文件、硬件日志文件和系统日志文件。

本申请实施例还提供了一种集群日志的收集系统，所述系统包括：节点配置单元、指令传输单元和日志收集单元；

所述节点配置单元，用于在分布式存储集群节点中配置SaltStack并搭建SaltStack的文件服务器；

所述指令传输单元，用于选择主节点，并向选定的从节点发送传输文件指令；

所述日志传输单元，用于所述主节点接收所述从节点传输的相关日志文件。

可选的，所述所述指令传输单元，用于选择主节点，并向选定的从节点发送传输文件指令，具体为：

所述指令传输单元，用于选择主节点，并发向所有选定的从节点发送传输文件指令。

可选的，所述日志传输单元，还用于所述主节点在指定目录下接收所述从节点传输的所述日志文件。

可选的，所述装置还包括：日志处理单元；

所述日志处理单元，用于所述主节点接收所述日志文件后，对所述日志文件进行归类与打包。

可选的，所述日志文件，至少包括以下其中的一种：

软件日志文件、硬件日志文件和系统日志文件。