[发明专利]分布式系统中应用监控数据的采集与分析系统及方法

说明书

本发明公开了一种分布式系统中应用监控数据的采集与分析系统及方法，属于分布式系统中应用资源监控领域。本发明包括：在集群中各主机上部署监控数据采集模块；监控数据采集模块采集所在主机上的容器的监控数据，并将其通过rpc调用发送到存储模块；存储模块收到发送的数据，并将其进行持久化，以供其他模块查看；用户调用图表展示模块，获取集群中应用监控数据的展示图表；图表展示模块调用数据分析模块，获取集群中各应用的监控数据；数据分析模块调用存储模块，获取历史监控数据，并建出集群中各应用的监控数据；图标展示模块收到数据分析模块返回的各应用的监控数据，将其渲染成图表形式。

技术领域

本发明涉及分布式系统中应用资源监控领域，尤其涉及一种分布式系统中应用监控数据的采集与分析系统及方法。

背景技术

在传统的应用监控中，由于应用程序部署以及运行方式，程序运行主机较为固定。因此传统的应用监控主要监控主机状态，或通过特定配置，监控特定程序的资源使用，对应用程序进行资源监控是一件较为困难的事情。

而在云计算快速发展的今天，由于应用部署、维护方式的变化，对应用的资源监控也迎来了新的挑战，当应用进行多副本部署时，获取应用总体资源消耗将更加困难。

发明内容

本发明的目的是提供一种分布式系统中应用监控数据的采集与分析系统及方法，解决用户在分布式系统中，了解应用程序资源使用情况困难的问题。

本发明解决其技术问题，采用的技术方案是：分布式系统中应用监控数据的采集与分析系统，包括监控数据采集模块、存储模块、数据分析模块和图表展示模块，所述监控数据采集模块和数据分析模块均连接存储模块，图表展示模块连接数据分析模块；

所述监控数据采集模块，用于通过在集群中各主机上部署容器监控工具，采集各主机上的各容器的资源使用情况数据，并通过rpc调用发送至存储模块；

所述存储模块，用于存储整个监控系统中的历史监控数据，并向外部提供rpc访问接口，通过存储模块存储和/或查询各容器的监控数据；

所述数据分析模块，用于向外部提供http访问接口，在调用者调用图表展示模块时被调用，调用者在调用时获得集群中各应用的监控信息，通过调用存储服务，查询系统中各容器资源使用情况的历史监控数据，并对其进行分析，然后将分析出的各应用的资源使用结果返回给图表展示模块，使图表展示模块根据返回的数据渲染出对应的图表；

所述图表展示模块，用于通过调用数据分析模块，获取集群中各应用的监控数据，并将这些数据，渲染为监控图表。

进一步的是，所述容器监控工具为cAdvisor。

进一步的是，所述资源使用情况数据包括CPU、内存和网络资源使用情况数据。

进一步的是，当数据分析模块对历史监控数据进行分析时，包括：根据容器标签，将多个容器关联到指定应用。

本发明还提出一种分布式系统中应用监控数据的采集与分析方法，应用于所述的分布式系统中应用监控数据的采集与分析系统，包括如下步骤：

步骤1、在集群中各主机上部署监控数据采集模块，并持续运行；

步骤2、监控数据采集模块采集所在主机上的容器的监控数据，并将其通过rpc调用发送到存储模块；

步骤3、存储模块收到监控数据采集模块发送的数据，并将其进行持久化，以供其他模块查看；

步骤4、用户调用图表展示模块，获取集群中应用监控数据的展示图表；

步骤5、图表展示模块调用数据分析模块，获取集群中各应用的监控数据；