[发明专利]一种基于情绪感知的可疑人员识别方法及其系统

权利要求书

1.一种基于情绪感知的可疑人员识别方法与系统，其特征在于：能够基于对异常情绪状态的非接触式感知，实现对潜在可疑人员的快速识别预警，因此能够进一步提升视频安防能力，具体包括图像预处理、人脸检测与过滤、人脸比对与核验、情绪分类与判定、可疑人员告警推送共计五个模块。

2.根据权利要求1所述的方法，其特征在于：所述图像预处理模块负责原始视频的接收，并对其进行重采样处理；其中所述重采样处理过程通过FFmpeg软件实现，并采用四帧速率对原始视频进行重采样处理，处理后的原始视频将被转换为相应的图片集合。

3.根据权利要求1所述的方法，其特征在于：所述人脸检测与过滤模块负责对权利要求1所述的图片集合进行逐张读取分析，从中检测和过滤人脸图像信息；该过程利用OpenCV基于Adaboost算法进行实现，检测窗口尺寸为25*25像素，并采用深度为2的弱分类器，以此检测图像中的人脸，并将人脸图像部分单独截取出来，另存为新的人脸图片集合。

4.根据权利要求1所述的方法，其特征在于：所述人脸比对与核验模块负责基于权利要求1所述的新的人脸图片集合，进行人脸比对与核验过程；该模块通过调用OpenCV的FaceRecognizer类库中的基于LBP直方图的人脸识别函数(LBPHFaceRecognizer)实现；若某张图片中的人脸与系统已有可疑人员库中的某个人脸比对成功，则系统将直接触发权利要求1所述的可疑人员告警推送模块，进行相关报警，否则系统进入权利要求1所述的情绪分类与判定模块。

5.根据权利要求1所述的方法，其特征在于：所述情绪分类与判定模块负责基于训练好的情绪分类模型进行情绪状态的判定；所使用的训练图像通过AFEW数据集中的训练集进行人脸检测得来，并包括平静、焦虑、紧张、愤怒、高兴、难过共计6类；所述情绪分类模型基于LSTM分类器训练完成，并可直接进行情绪状态的判定。

6.根据权利要求1所述的方法，其特征在于：所述可疑人员告警推送模块负责基于权利要求1所述人脸比对与核验模块和情绪分类与判定模块的比对判定结果进行相应的响应；若人脸比对成功或者情绪判定结果为焦虑、紧张、愤怒等特定异常情绪状态时，系统将自动触发该模块进行相关告警信息的推送。