[发明专利]一种基于深度学习的视频智能分析系统

摘要

本发明是一种基于人工智能的视频分析系统，该系统包含摄像头，拾音器，视频处理模块，音频放大模块，语音处理模块，表情/行为分析模块，云端服务器模块。基于深度学习的视频智能分析系统可以实时跟踪课堂中的学生老师，通过对老师，学生的动作神态语音判断实时情感，该系统可以为使用者提供评价指标或者判定依据，其用途可以用作情感分析，通过对视频中的人物的动作跟踪判断人物的情感，将其作为一项教育中的课堂评价体系的评价指标。在教育方面，教育工作者可以通过视频的反馈结果对某一堂课的老师进行教学质量评估，也可以对视频中老师的上课情感，学生情感，学生是否走神进行分析，综合评估老师的教学质量。

主权项

1.一种基于深度学习的视频智能分析系统，其特征在于：包括摄像头、拾音器、视频处理模块、音频增强模块、表情/行为分析模块、语音处理模块、云端服务器模块，终端显示模块，所述表情/行为分析模块实时分析课堂中老师和学生的表情变化，根据老师和学生的行为变化进行表情分类，情感分析，所述摄像头和拾音器分别收集课堂视频和声音数据，对数据打包压缩，所述视频处理模块处理收集到的视频数据，对数据进行预处理操作数据清洗，所述音频增强模块处理收集到的语音数据，对语音数据波谱进行分型，所述语音处理模块提取收集到的语音音频中的语音特征，对语音特征分析，所述云端服务器模块为深度学习算法，机器学习算法提供算力支持，所述表情/行为分析模块分析课堂中的人脸，并对课堂中老师和学生的动作进行实时定位跟踪，通过分析学生上课的表情变化和动作行为判断该学生上课是否认真听课，根据老师的表情/行为评估老师的上课教学质量，所述语音识别模块用来判断老师上课的授课状态，通过分析老师的声音波谱的波动情况判断教师的情感状态，所述终端显示模块为用户提供可视化展示。