[发明专利]一种基于UDP的海量事件实时数据收集方法及装置

说明书

本发明实施例提供一种基于UDP的海量事件实时数据收集方法及装置，所述方法包括：将应用服务的开发代码通过用户数据报协议UDP发送到数据聚合器Brubeck；将利用Brubeck收集的数据发送到Graphite；利用CollectD从本地或者远程收集数据发送到Graphite；将Graphite获取的数据写入磁盘；利用可视化面板Crafana从Graphite获取数据，并作为统一的门户用来显示数据。上述技术方案具有如下有益效果：可以自由的配置监控系统，构建多维度报表，可以进行海量事件数据的收集,并且具有容错性。

技术领域

本发明涉及数据统计和分析技术领域，尤其涉及一种基于UDP的海量事件实时数据收集方法及装置。

背景技术

为了适应行业的发展,现在的项目都有许多个应用微服务组成，由于对数据统计和分析的需求越来越强烈,已经是必不可少的一部分,所以必须对应用微服务加以监控,如果这些监控全部人工完成,显然不太可能。

发明内容

本发明实施例提供一种基于UDP的海量事件实时数据收集方法及装置，以自由的配置监控系统，进行海量事件数据的收集。

一方面，本发明实施例提供了一种基于UDP的海量事件实时数据收集方法，所述方法包括：

将应用服务的开发代码通过用户数据报协议UDP发送到数据聚合器Brubeck；

将利用Brubeck收集的数据发送到Graphite；

利用CollectD从本地或者远程收集数据发送到Graphite；

将Graphite获取的数据写入磁盘；

利用可视化面板Crafana从Graphite获取数据，并作为统一的门户用来显示数据。

另一方面，本发明实施例提供了一种基于UDP的海量事件实时数据收集装置，所述装置包括：

数据聚合器Brubeck单元，用于接收通过用户数据报协议UDP发送的应用服务的开发代码；

Graphite单元，用于作为路由，收集利用Brubeck收集的数据和利用CollectD从本地或者远程收集的数据，并将Graphite获取的数据写入磁盘；

可视化面板Crafana单元，用于从Graphite获取数据，并作为统一的门户用来显示数据。

上述技术方案具有如下有益效果：可以自由的配置监控系统，构建多维度报表，可以进行海量事件数据的收集,并且具有容错性。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例一种基于UDP的海量事件实时数据收集方法流程图；

图2为本发明实施例一种基于UDP的海量事件实时数据收集装置结构示意图；

图3为本发明应用实例一种基于UDP的海量事件实时DevOp数据收集原理示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，为本发明实施例一种基于UDP的海量事件实时数据收集方法流程图，所述方法包括：