[发明专利]一种基于大数据环境下的视图像快速识别方法

权利要求书

1.一种基于大数据环境下的视图像快速识别方法，其特征在于：该方法的步骤如下：

S1.第三方业务系统向Mina服务器发送识别请求指令，对该指令与该MINA服务器进行关联存储；

S2. Mina服务器将第三方业务系统发送的识别请求信令发送到系统业务逻辑处理模块，并转化为内部业务的识别指令和入库指令；

S3.当为识别指令时，系统业务逻辑处理模块解析出识别文件的路径并对其进行判断是否需要进行下载，若需下载则将该路径封装成下载指令分发给分布式下载子系统进行处理，否则将文件路径及其关联信息封装成识别指令分发给分布式识别子系统进行识别；

S4. 当为入库指令时则直接分发给分布式识别子系统进行入库；

S5. 分布式识别子系统识别完成后，将识别结果反馈到系统业务逻辑处理模块；

S6. 系统业务处理模块在接收到识别结果信息后，将有效的识别结果信息上传至分布式存储系统进行存储，并将文件的存储路径和识别结果返回给对应的第三方业务系统；

所述的步骤S3包括以下子步骤：

S301. 分布式下载子系统从Redis中获取到下载指令后，对指令中的下载路径进行解析，对下载路径的协议进行区分为FTP和HTTP，并基于协议调用不同的下载方案；

S302. 当使用HTTP协议下载视频时，根据HTTP协议规范对下载路径的有效性进行判断，当判定为无效时，则尝试使用JS和AJAX解析核心解析视频的真实地址，再通过标准HTTP下载协议进行下载；若是图片资源，则直接进行下载；

S303. 当使用FTP下载时，则直接使用FTP协议进行下载；

S304. 下载功能集群从统一的IP代理池中获取有效的IP代理信息，并按时间进行替换；

S305. 下载的资源文件将保存至系统共享目录供业务逻辑处理模块及分布式识别子系统访问；

所述的步骤S5包括以下子步骤：

S501. 分布式识别子系统从Redis中获得识别指令后，解析出待识别文件的共享目录路径及识别类型，将该文件的HASH值在识别类型所对应的黑白名单库中进行搜索，如果存在，则直接返回识别结果，如不存在，则交由预处理模块进行处理；

S502. 预处理模块在接收到识别指令后，对待识别文件进行解码以判断文件的确定编码格式，若为图片，则判断图片尺寸大小是否符合要求，若为视频，则对视频进行关键帧抽帧处理，否则直接返回识别失败结果信息；

S503. 基础识别能力集群在接收到识别指令后，基于自身能力对待识别图片进行判断，将识别结果反馈到系统业务逻辑处理模块，并将识别结果更新到黑白名单库。

2.根据权利要求1所述的一种基于大数据环境下的视图像快速识别方法，其特征在于：所述的步骤S4包括以下子步骤：

S401. 待入库文件被具有指纹计算能力的一台服务器计算出其对应的特征值和特征向量；

S402. 将该值同步给系统中其余具备相同能力的识别服务器。

3.根据权利要求1所述的一种基于大数据环境下的视图像快速识别方法，其特征在于：所述系统业务逻辑处理模块包括异步通信接口、业务控制层和文件存储管理层；所述异步通信接口用于对外通信架构的搭建，并负责进行消息结构解析，以端口区分不同的系统通信连接，使其能够在功能上共享识别服务而在业务上实现独立；所述业务控制层用于视图像快速识别系统业务的控制，将分布式下载子系统和分布式识别子系统有机的结合起来，实现业务指令与内部控制指令和识别结果消息的交互，并实现对分布式识别子系统的识别控制；所述文件存储管理层用于处理产生的临时文件的维护管理功能，并负责处理与分布式存储系统的交互功能。

4.根据权利要求1所述的一种基于大数据环境下的视图像快速识别方法，其特征在于：所述基础识别能力集群的识别能力包括基于特征值和特征向量的指纹比对能力与基于深度学习的模式识别能力。