[发明专利]一种网络流量内容提取和分析检索方法

摘要

本发明公开了一种网络流量内容提取和分析检索方法，包括以下步骤：将原始流量分流到n个数据处理队列；每个数据处理队列独立处理该队列的原始数据报文，对报文进行协议识别和过滤，对其中的TCP流量进行会话重组；对重组后的TCP会话进行协议解析和解码，并提取出其中结构化的数据信息；对于需求指定的关键信息基于多模式匹配算法或者搜索引擎技术，在内容解析提取模块提取到的数据内容中进行检索标注，并将标记结果提交至检索标注信息数据库，从而为多种方式的应用提供检索标注结果。本发明解决了TCP会话重组中数据包重复和序列号归零等问题，实现对原始流量的特征标定，便于用户获取有效信息。

主权项

一种网络流量内容提取和分析检索方法，用于在对原始网络流量进行内容提取和关键信息的分析检索，包括以下步骤：第一步，采用流量分流模块，处理从高速网络中捕获并存储的流量文件中的原始数据包，根据服务器计算核心数目设置相应的数据处理队列数目n，将原始流量分流到n个数据处理队列分别处理；第二步，每个数据处理队列独立处理该队列的原始数据报文，利用协议识别过滤模块对报文进行协议识别和过滤，采用TCP会话重组模块对其中的TCP流量进行会话重组，并维护每个会话的状态信息；第三步，采用内容解析提取模块对重组后的TCP会话进行协议解析和解码，并提取出其中结构化的数据信息；第四步，采用检索标注模块，基于多模式匹配算法或者搜索引擎技术，对于需求指定的关键信息在内容解析提取模块提取到的数据内容中进行检索和标注，并将标记结果提交至检索标注信息数据库，从而为多种方式的应用提供检索标注结果。