[发明专利]网络视频深度搜索及在线分析方法

说明书

本发明公开了一种网络视频深度搜索及在线分析方法，包括以下步骤：S1：通过关联第三信息资源库自动进行IP反查，确定待监测目标范围；S2：通过有害视频检测模块响应有害视频监测需求；S3：在待监测目标范围内，网络视频爬虫遍历所有的样本网络视频；S4：精确搜索目标网络视频；S5：采用有害信息二次研判算法，对一次中标的网页信息进行再研判；S6：若未精确找到目标网络视频，则进行目标网络视频模糊搜索；S7：通过第三方搜索引擎，并结合高危人群信息人工研判，自动载入样本训练机制。本发明通过对特定网站或网站群快速或深度分析，进而获得结果，系统报警精度高，能解决目前通用方案无法实现的有害视频监测需求。

技术领域

本发明涉及信息监测技术领域，特别是涉及一种网络视频深度搜索及在线分析方法。

背景技术

针对IDC有害信息监测的业务需求，目前主流技术方案有线路监测和爬虫监测两大模式，传统方式为逐个逐层网站搜索，且下载视频本地分析时会耗费大量计算资源及带宽资源；再者，网络核心层部署成本较高，破坏现有业务拓扑结构，影响业务。

发明内容

本发明的目的在于克服现有技术的不足，提供一种网络视频深度搜索及在线分析方法，通过对特定网站或网站群快速或深度分析，进而获得结果。

本发明的目的是通过以下技术方案来实现的：网络视频深度搜索及在线分析方法，包括以下步骤：

S1：通过关联第三信息资源库自动进行IP反查，确定待监测目标范围；

S2：通过有害视频检测模块响应有害视频监测需求；

S3：在待监测目标范围内，网络视频爬虫遍历所有的样本网络视频；

S4：精确搜索目标网络视频；

S5：采用有害信息二次研判算法，对一次中标的网页信息进行再研判；

S6：若未精确找到目标网络视频，则进行目标网络视频模糊搜索；

S7：通过第三方搜索引擎，并结合高危人群信息人工研判，自动载入样本训练机制。

所述的有害视频检测模块包括以下子步骤：

S21：设置样本；

S22：目标定位；

S23：判断文件的大小；

S24：下载判断文件；

S25：比较网络视频hash值；

S26：人工再判断文件的大小。

所述的步骤S5中，依靠有害信息二次研判词库进行所述的二次研判算法，所述有害信息二次研判词库包括重点词、名词、动词、形容词以及排除词。

本发明的有益效果是：

1）采用独有的有害信息二次研判算法，对一次中标的网页信息进行再研判，降低系统误报率和漏报律，提升报警精度，有效提高人工研判的效率，二次研判算法依靠独有的有害信息二次研判词库，根据不同分类的关键词定制其对应的二次研判词库，能够最大限度保证系统报警精度。

2）有害视频检测模块能解决目前通用方案无法实现的有害视频监测需求，能够达到50%以上的网页有害视频覆盖。

3）与基于网络核心层对比，本方案部署方式灵活，可实现任何时间、任何地点对任何在线网站内网络视频远程分析；极大节省耗费的带宽和计算资源，不会给网络核心设备增加负载；搜索范围可自由调整，不局限于某网络内数据流。

具体实施方式