[发明专利]数据采集方法、装置、存储介质及交换机

说明书

本申请属于数据采集处理技术领域，尤其涉及一种数据采集方法、装置、存储介质及交换机。所述方法包括：接收各个网关服务器发送的网络数据报文；根据预先配置的端口镜像映射规则，对所述各个网关服务器发送的网络数据报文进行端口镜像映射，得到待采集网络数据报文；将所述待采集网络数据报文通过预定发送端口，发送至与预定发送端口对应的目标采集终端，以便所述目标采集终端获取所述待采集网络数据报文。通过本申请实施例，无论网关服务器的数量为多少，都可以通过一个预定发送端口汇总所有需要采集的网关服务器转发的网络数据报文并发送至目标采集终端进行采集处理，从而节省了数据采集成本。

技术领域

本申请属于数据采集处理技术领域，尤其涉及一种数据采集方法、装置、存储介质及交换机。

背景技术

在相关数据采集技术中，通常对采集系统终端的采集性能要求较高，要求可以快速高效地的采集网关服务器的所有发送数据。

然而，现有为每一台网关服务器配置对应的一个数据采集终端的做法，虽然可以保证快速高效地采集各个网关服务器的发送数据。但是，当需要采集的网关服务器数量增多时，需要配置数据采集终端的数量也随之增多。这显然不利于在保证快速高效地采集各个网关服务器发送数据的前提下，使总体数据采集成本的最低化。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本申请的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

有鉴于此，本申请实施例提供了一种数据采集方法、装置、存储介质及交换机，以解决现有技术中无法在保证快速高效地采集各个网关服务器发送数据的前提下，使总体数据采集成本的最低化的问题。

本申请的第一方面，提供了一种数据采集方法，所述方法包括：

接收各个网关服务器发送的网络数据报文；

根据预先配置的端口镜像映射规则，对所述各个网关服务器发送的网络数据报文进行端口镜像映射，得到待采集网络数据报文；

将所述待采集网络数据报文通过预定发送端口，发送至与预定发送端口对应的目标采集终端，以便所述目标采集终端获取所述待采集网络数据报文。

在本申请的一些实施例中，所述预先配置的端口镜像映射规则，按照以下方法确定：

根据各个网关服务器的网络地址，确定各个网关服务器连接的接收端口；

根据所述各个网关服务器连接的接收端口，配置各个端口的镜像映射规则。

在本申请的一些实施例中，在所述接收各个网关服务器发送的网络数据报文之前，所述方法还包括：

配置各个接收端口的数据过滤规则；

在所述接收各个网关服务器发送的网络数据报文之后，还包括：

根据所述数据过滤规则，对所述各个接收端口接收的网络数据报文进行过滤，得到预定类型的网络数据报文。

在本申请的一些实施例中，在所述得到预定类型的网络数据报文之后，所述方法还包括：

根据预先配置的端口镜像映射规则，对过滤后的所述各个网关服务器发送的网络数据报文进行端口镜像映射，得到待采集网络数据报文。

在本申请的一些实施例中，在所述接收各个网关服务器发送的网络数据报文之前，所述方法还包括：

预先配置DPDK运行环境；

创建用于存储网络数据报文的内存环；

设置所述网络数据报文转发处理策略；

根据所述接收策略，创建对应的工作线程。