[发明专利]多维度查询流量数据的方法及系统

说明书

技术领域

本发明涉及通信领域，更为具体而言，涉及多维度查询流量数据的方法及系统。

背景技术

随着网络业务规模的扩大，机构内部流量传输越来越多，不规范的流量传输会导致跨机房流量拥塞，最终导致业务访问受损，影响业务的正常访问。因此对于网络管理人员需要快速对海量流量数据进行多维度的查询，以掌握网络流量的实时状况，网内应用及不同业务在不同时间段的使用情况，快速展示某个时间段内的流量概况，掌握跨机房网络负载状况，以及时发现网络结构的不合理，快速定位拥塞流量归属，避免网络带宽和服务器瓶颈问题。然而，在现有技术中通常使用关系型数据库进行多维度查询，但是对于大规模的流量数据的查询关系型数据库难以支持，另外对于多种维度的联合查询来说，包括分布式数据库在内也难以满足需求。

发明内容

为有效地解决上述技术问题，本发明提供了一种多维度查询流量数据的方法及系统。

一方面，本发明的实施方式提供了一种多维度查询流量数据的方法，所述方法包括：

采集流量数据；

在所述采集到的流量数据中，将含有相同五元组的流量数据汇聚成流，其中所述五元组包括：源IP、目的IP、源接口、目的接口、TOS队列；

获取与所述汇聚出的流对应的流量信息，其中所述流量信息包括：源产品线、目的产品线、源网段、目的网段、源机房、目的机房；

将所述获取到的流量信息与所述流的五元组对应地存储至支持联机分析处理的数据库；

通过所述支持联机分析处理的数据库对所述流量数据进行多维度查询。

另一方面，本发明的实施方式提供了一种多维度查询流量数据的系统，所述系统包括：

采集模块，用于采集流量数据；

汇聚模块，用于在所述采集模块所采集到的流量数据中，将含有相同五元组的流量数据汇聚成流，其中所述五元组包括：源IP、目的IP、源接口、目的接口、TOS队列；

获取模块，用于获取与所述汇聚模块所汇聚出的流对应的流量信息，其中所述流量信息包括：源产品线、目的产品线、源网段、目的网段、源机房、目的机房；

存储模块，用于将所述获取模块所获取到的流量信息与所述流的五元组对应地存储至支持联机分析处理的数据库；

多维度查询模块，用于通过所述存储模块所存储至的支持联机分析处理的数据库对所述流量数据进行多维度查询。

实施本发明提供的多维度查询流量数据的方法及系统通过使用支持联机分析处理的数据库可以更为高效地多维度查询海量流量数据。

附图说明

图1是根据本发明实施方式的多维度查询流量数据的方法的流程图；

图2示出了图1所示的步骤S130的一种实施方式；

图3示出了图1所示的步骤S140的一种实施方式；

图4示出了本发明实施方式的多维度查询流量数据的框架图；

图5是根据本发明实施方式的多维度查询流量数据的系统的结构示意图。

具体实施方式

为使本发明的实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述。

图1是根据本发明实施方式的多维度查询流量数据的方法的流程图。参见图1，该方法包括：

S110：采集流量数据。

其中，在本发明的实施方式中，可以通过基于网络流信息的统计技术采集所述流量数据，例如通过Netstream(提供报文统计功能，它根据报文的目的ip地址、目的端口号、源ip地址、源端口号、协议号和TOS(三层数据包的服务类型标记)来区分流信息，并针对不同的流信息进行独立的数据统计)板卡进行采集。

S120：在所述采集到的流量数据中，将含有相同五元组的流量数据汇聚成流，其中所述五元组包括：源IP、目的IP、源接口、目的接口、TOS队列。其中流又称为网络流，指在一段时间内，一个源IP地址和目的IP地址之间传输的单向报文流，所有报文具有相同的源端口号、目的端口号、协议号和源、目的IP地址，即五元组内容相同。

S130：获取与所述汇聚出的流对应的流量信息，其中所述流量信息可以包括，但不限于：源产品线、目的产品线、源网段、目的网段、源机房、目的机房。

其中，如图2所示，在本发明的实施方式中可以通过以下方式实现步骤S130：

S131：根据所述流的源IP，获取所述源网段；

S132：根据所述获取到的源网段以及网络元数据，获取所述源机房；

S133：根据所述源IP以及业务元数据，获取所述源产品线；