[发明专利]ISP间互联口超过阈值流量监控系统及方法

说明书

技术领域

本发明涉及网络流量监控及流量管理技术领域，更具体地，涉及一种大型ISP间互联口超过阈值流量监控系统及方法。

背景技术

近年来，peer-to-peer(P2P)应用发展非常迅速，以P2P为基础的文件共享、即时通讯和网络视频直播等应用越来越多，其流量占据了超过一半的网络流量，并且目前还在持续的增长。P2P流量对于企业网络以及运营商来说都有着重要的影响，巨大的流量可能会导致网络拥堵概率增加，此外也可能给企业网络带来安全相关的问题，尤其是运营商之间的互联口，因为带宽有限，当P2P流占据大量带宽时，势必造成互联口网络拥堵，用户跨网访问资源会变得异常缓慢。为了管理P2P流量，优化网络性能，首先需要对P2P流量进行长期的监控。

发明内容

为此，本发明提出了一种大型ISP间互联口超过阈值流量监控系统及方法。

根据本发明的一方面，提出了一种ISP间互联口流量监控系统，该系统包括：分流设备，数据采集服务器组，采集数据存储服务器，数据处理服务器，数据存储服务器，web服务器和通讯交换机，其中：

所述分流设备用于将从外部网络所接收到的镜像数据流根据所述数据采集服务器组中不同数据采集服务器的实际性能分成多份，并发送给所述数据采集服务器组中相应的数据采集服务器；

所述数据采集服务器组包括多个数据采集服务器，所述数据采集服务器用于进行数据采集，并将生成的采集数据文件发送至所述通讯交换机上；

所述采集数据存储服务器用于对同一时间不同数据采集服务器产生的采集数据文件根据采集时间进行汇总和存储，并将汇总后得到的合并采集数据文件发送给所述数据处理服务器；

所述数据处理服务器用于对所述合并采集数据文件进行处理和/或管理，并将经处理和/或管理后得到的采集数据发送给所述通讯交换机和所述数据存储服务器；

所述数据存储服务器和web服务器为数据关联存储设备，所述数据存储服务器用于存储所述数据处理服务器处理和/或管理后得到的采集数据，所述web服务器用于向用户展示流量监控信息；

所述通讯交换机用于提供系统内各服务器间及和外部网络的通信通道。

根据本发明的另一方面，提出了一种ISP间互联口流量监控方法，该方法包括以下步骤：

步骤S1，分流设备将从外部网络所接收到的镜像数据流根据多个数据采集服务器的实际性能分成多份，并分配给相应的数据采集服务器；

步骤S2，所述数据采集服务器对于接收到的镜像数据流按照一定的采集频率进行数据采集，并生成采集数据文件发送给采集数据存储服务器；

步骤S3，所述采集数据存储服务器将来自不同数据采集服务器的采集数据文件，以采集时间为顺序进行合并产生合并采集数据文件S2file；

步骤S4，数据处理服务器对所述合并采集数据文件进行过滤处理，然后将过滤后的数据写入过滤数据文件中；

步骤S5，所述数据处理服务器对于所述过滤数据文件进行处理，即通过排序和筛选操作，获取每对ip地址的当日流量最大值即流量日峰值，根据ip地址访问方向区分正反向记录，并将所述流量日峰值写入峰值文件中；

步骤S6，数据处理服务器获取各数据采集服务器数据流量，即所述数据处理服务器根据白名单信息，在所述合并采集数据文件中查找所述白名单中的每条记录在各个时间点的数据详细信息，并将获得的数据写入采集频率点数据文件；

步骤S7，数据存储服务器将所述峰值文件和采集频率点数据文件中的数据存入其数据库。

本发明可以统计监控长期（比如十年内）每对ip流量的变化，并可以实现阈值智能变化、白名单自动管理等多种流量管理功能。

附图说明

图1为本发明提出的大型ISP间互联口超过阈值流量监控系统的结构示意图；

图2为本发明提出的大型ISP间互联口超过阈值流量监控方法的流程图。

具体实施方式

为了清楚详细的阐述本发明的实现过程，下面给出了一些本发明的具体实施例。参照附图对本发明的实例进行详细说明，在描述过程中省略了对于本发明来说是不必要的细节和功能以防止对本发明的理解造成混淆。

图1是本发明提出的大型ISP间互联口超过阈值流量监控系统的结构示意图，如图1所示，所述系统包括：分流设备，数据采集服务器组，采集数据存储服务器，数据处理服务器，数据存储服务器，web服务器和通讯交换机，其中：