[发明专利]大型ISP间互联口统计系统及方法

说明书

技术领域

本发明涉及网络行为监控与网络行为管理技术领域，更具体地，涉及一种针对特定ICP在大型ISP间互联口流量和内容的统计排名系统及方法。

背景技术

据互联网追踪机构Netcraft在2011年10月9日的统计报告显示，全球网站总量约5亿。互联网上的信息十分广泛，而这里面有许多是人们关心的热点信息，这些热点网站上的内容，代表了互联网信息最受关注的部分。

针对特定的ICP的网站内容进行分析，解析其中的超链接以及对应的正文信息，然后再通过URL与正文反馈网站的热度，也为企业广告的正确投放提供强有力的依据。

发明内容

为了更准确地掌握热门资源的内容和排名，本发明提出一种针对特定ICP的大型ISP间互联口流量和内容的统计系统及方法，用于统计特定ICP在大型ISP间互联口流量和内容。

根据本发明的一方面，提出一种大型ISP间互联口统计系统，该系统包括：分流设备，数据采集服务器组，采集数据存储服务器，数据处理服务器，数据存储服务器，web服务器和通讯交换机，其中：

所述分流设备用于将从外部网络所接收到的镜像数据流根据所述数据采集服务器组中不同数据采集服务器的实际性能分成多份，并发送给所述数据采集服务器组中相应的数据采集服务器；

所述数据采集服务器组包括多个数据采集服务器，所述数据采集服务器用于进行数据采集，并将生成的采集数据文件发送至所述通讯交换机上；

所述采集数据存储服务器用于对同一时间不同数据采集服务器产生的采集数据文件根据采集时间进行汇总和存储，并将汇总后得到的合并采集数据文件发送给所述数据处理服务器；

所述数据处理服务器用于对所述合并采集数据文件进行处理和/或管理，并将经处理和/或管理后得到的采集数据发送给所述通讯交换机和所述数据存储服务器；

所述数据存储服务器和web服务器为数据关联存储设备，所述数据存储服务器用于存储所述数据处理服务器处理和/或管理后得到的采集数据，所述web服务器用于展示流量监控信息；

所述通讯交换机用于提供系统内各服务器间及和外部网络的通信通道。

根据本发明的另一方面，还提出一种大型ISP间互联口统计方法，该方法包括以下步骤：分流设备，数据采集服务器组，采集数据存储服务器，数据处理服务器，数据存储服务器，web服务器和通讯交换机，其中：

所述分流设备用于将从外部网络所接收到的镜像数据流根据所述数据采集服务器组中不同数据采集服务器的实际性能分成多份，并发送给所述数据采集服务器组中相应的数据采集服务器；

所述数据采集服务器组包括多个数据采集服务器，所述数据采集服务器用于进行数据采集，并将生成的采集数据文件发送至所述通讯交换机上；

所述采集数据存储服务器用于对同一时间不同数据采集服务器产生的采集数据文件根据采集时间进行汇总和存储，并将汇总后得到的合并采集数据文件发送给所述数据处理服务器；

所述数据处理服务器用于对所述合并采集数据文件进行处理和/或管理，并将经处理和/或管理后得到的采集数据发送给所述通讯交换机和所述数据存储服务器；

所述数据存储服务器和web服务器为数据关联存储设备，所述数据存储服务器用于存储所述数据处理服务器处理和/或管理后得到的采集数据，所述web服务器用于展示流量监控信息；

所述通讯交换机用于提供系统内各服务器间及和外部网络的通信通道。

分流设备，数据采集服务器组，采集数据存储服务器，数据处理服务器，数据存储服务器，web服务器和通讯交换机，其中：

所述分流设备用于将从外部网络所接收到的镜像数据流根据所述数据采集服务器组中不同数据采集服务器的实际性能分成多份，并发送给所述数据采集服务器组中相应的数据采集服务器；

所述数据采集服务器组包括多个数据采集服务器，所述数据采集服务器用于进行数据采集，并将生成的采集数据文件发送至所述通讯交换机上；

所述采集数据存储服务器用于对同一时间不同数据采集服务器产生的采集数据文件根据采集时间进行汇总和存储，并将汇总后得到的合并采集数据文件发送给所述数据处理服务器；

所述数据处理服务器用于对所述合并采集数据文件进行处理和/或管理，并将经处理和/或管理后得到的采集数据发送给所述通讯交换机和所述数据存储服务器；