[发明专利]一种数据采集系统、方法、设备及存储介质

权利要求书

1.一种数据采集系统，其特征在于，包括：数据采集加工模块；

所述数据采集加工模块包括数据采集层、原始事件流、数据加工层和标准化事件流；

所述数据采集层包括协议适配模块和路由模块；

所述协议适配模块，被设置为适配各个不同的网元设备，并从所述网元设备获取数据；

所述路由模块，被设置为将所述数据路由到原始事件流中的指定主题；

所述数据加工层，被设置为从所述原始事件流中的指定主题中读取数据，并将读取的数据通过事件模型转换为标准化事件，并将所述标准化事件发布到标准化事件流中的指定主题。

2.根据权利要求1所述的系统，其特征在于，

所述数据加工层，被设置为从所述原始事件流中的指定主题读取数据，并将读取的数据通过解码模型格式化为临时事件，并通过事件加工模型将所述临时事件加工为标准化事件，并将所述标准化事件发布到标准化事件流的指定主题中。

3.根据权利要求1所述的系统，其特征在于，适配模块包括新增协议组件、安全传输层协议组件，传输控制协议组件和安全文件传送协议组件；

协议组件，被配置为从基于协议通信的网元设备上获取数据，并将获取的所述数据去掉应用层协议。

4.根据权利要求1所述的系统，其特征在于，所述数据采集层还包括内部事件通道；

所述内部事件通道被配置为缓存通过所述适配模块获取的数据。

5.根据权利要求1所述的系统，其特征在于，还包括：

订阅模块，被设置为接收上层分析系统的订阅消息，基于所述订阅消息的类型以及过滤条件向所述网元设备发送数据采集请求，所述数据采集请求，用于指示所述网元设备上报数据。

6.根据权利要求1-5任一项所述的系统，其特征在于，所述事件加工模型包括事件、事件公共子结构和事件属性，其中，事件属性包括事件转换算法。

7.一种数据采集方法，其特征在于，包括：

通过协议适配模块适配各个不同的网元设备，并从所述网元设备中获取数据；

通过路由模块将所述数据路由到原始事件流中的指定主题；

通过数据加工层将从所述原始事件流中的指定主题读取数据，并将读取的数据通过事件模型转换为标准化事件，并将所述标准化事件发布到标准化事件流中的指定主题。

8.根据权利要求7所述的方法，其特征在于，所述通过协议适配模块适配各个不同的网元设备，并从所述网元设备中获取数据，包括：

通过协议适配模块中的目标协议组件获取对应网元设备的数据，并将所述数据的应用层协议去除，以及为所述数据添加标签，并发布到内部事件通道中；

所述通过路由模块将所述数据路由到原始事件流中的指定主题，包括：

通过路由模块从所述内部事件通道中读取数据，并将读取的所述数据发布到所述原始事件流中的指定主题。

9.根据权利要求7或8所述的方法，其特征在于，从所述原始事件流中的指定主题读取数据，并将读取的数据通过事件模型转换为标准化事件，包括：

通过消息组件从原始事件流中的指定主题中拉取数据，并将拉取的数据中数据头通过解码模型进行解码；

将解码的数据通过事件加工模型转换为标准化事件。

10.一种数据采集的设备，其特征在于，所述设备包括存储器、处理器、存储在所述存储器上并可在所述处理器上运行的程序以及用于实现所述处理器和所述存储器之间的连接通信的数据总线，所述程序被所述处理器执行时实现如权利要求7-9任一项所述的方法。

11.一种存储介质，用于计算机可读存储，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现权利要求7-9中任一项所述的方法。