[发明专利]数据采集方法和装置

说明书

技术领域

本发明涉及通信技术，尤其涉及一种数据采集方法和装置。

背景技术

简单网络管理协议（Simple Network Management Protocol；简称：SNMP）是一个标准的用于管理IP网络上节点的协议。被管理的网络节点以管理信息库（MIB）的方式描述本网络节点可以通过SNMP访问和定义的变量。其中，该变量在MIB中以树形结构组织，变量即为树中的叶子节点，每个叶子节点均分配一个唯一的对象标识符（OID），且相关的变量划分在同一根下。

另外，在网络管理系统中，主要通过SNMP协议定时采集被管理的网络节点中的MIB中定义的变量的数据，以根据该变量的数据对该被管理的网络节点进行性能监视和数据挖掘分析。目前，通过SNMP协议定时采集被管理的网络节点中的MIB中定义的变量的数据的方式主要包括两种：

第一种，网络管理系统向用户展现被管理的网络节点中的MIB定义的变量时是习惯按照变量的相关性将不同一根下的变量划分为不同的组展示，另外，还将同一根下的一组变量看作一个整体。这样，在进行变量的数据采集时，也按照这种分组进行采集，即在接收一个应用所需要变量的数据和周期的采集请求时，需要创建一个采集任务，以使根据该周期将该变量所在分组全部采集。此外，在采集不同应用所需要变量的数据和周期的采集请求时，需要分别为每个采集请求创建对应的采集任务，以分别根据不同应用对应的周期将对应所需要变量所在的分组全部采集。

第二种，在进行变量的数据采集时，在接收一个应用所需要变量的数据和周期的采集请求时，创建一个采集任务，以使根据该周期将该变量采集。此外，在采集不同应用所需变量的数据和周期的采集请求时，需要分别为每个采集请求创建对应的采集任务，以分别根据不同应用对应的周期将对应所需要变量采集。

但是，对于第一种方式，可能会造成采集很多不必要的数据，从而增加被管理的网络节点的负担，并浪费网络带宽。另外，在针对不同应用中所采集的相同变量时也会造成不必要的浪费，还可能会导致针对不同应用所采集的相同变量的数据不一致的问题。对于第二种方式，当一组变量中需要采集的变量的数据很多时，会造成采集任务的增加，每个采集任务都有各自的报头，从而降低了有效载荷，进而增加了被管理的网络节点的处理负担。

发明内容

本发明提供一种数据采集方法和装置，用于解决现有技术中采集不必要的数据，SNMP请求过多，以及重复采集而导致数据不一致的问题，进而有效地提高了采集效率。

本发明的第一个方面是提供一种数据采集处理方法，包括：

接收数据采集处理请求，所述数据采集处理请求包括采集对象实例和采集参数；

根据预设的归并复用规则和所述采集参数，创建采集任务和/或对当前存储的采集任务进行相应的处理，以使所述采集参数中的变量通过所述变量对应的引用计数归并复用到一个采集任务中；

按照创建后的采集任务和/或处理后的采集任务中的周期，构建并发送所述创建后的采集任务和/或处理后的采集任务对应的SNMP请求给所述采集对象实例对应的被管理的网络节点，以获取所述被管理的网络节点中所述创建后的采集任务和/或处理后的采集任务中的变量的数据。

在第一个方面的第一种可能实现方式中，当所述数据采集处理请求为增加数据采集处理请求时，所述采集参数包括第一变量和第一周期，则所述根据预设的归并复用规则和所述采集参数，创建采集任务和/或对当前存储的采集任务进行相应的处理，包括：

判断是否存在第一采集任务；所述第一采集任务包含所述第一变量；

若判断出存在所述第一采集任务，则判断所述第一采集任务的第二周期是否小于或等于所述第一周期；

若判断出所述第二周期小于或等于所述第一周期，则将所述第一采集任务中的第一变量对应的引用计数加1，并缓存所述第一变量对应的所述第一周期。

结合第一个方面的第一种可能实现方式，在第一个方面的第二种可能实现方式中，还包括：若判断出所述第二周期大于所述第一周期，则判断所述第一采集任务中是否还存在除所述第一变量的其他变量；

若判断出所述第一采集任务中还存在除所述第一变量的其他变量，则将所述第一采集任务中的第一变量删除。

结合第一个方面的第二种可能实现方式，在第一个方面的第三种可能实现方式中，还包括：若判断出所述第一采集任务中不存在除所述第一变量的其他变量，则将所述第一采集任务删除。