[发明专利]一种基于课堂情绪和行为分析的学习辅助方法及系统

权利要求书

1.一种基于课堂情绪和行为分析的学习辅助方法，包括以下步骤：

步骤一、通过图像采集单元采集课堂中学生的图像数据信息；

步骤二、通过音频采集单元采集课堂中老师的语音数据信息；

步骤三、对步骤一中所采集的课堂中学生的图像数据信息进行处理，识别图像数据信息中的人脸特征，并与数据库中所存储的学生人脸特征进行相似度计算，得出学生的个人信息；

步骤四、在步骤三的基础上，继续对步骤一中所采集的课堂中学生的图像数据信息进行处理，对人脸进行表情识别以及人体姿态识别，分析学生当前时间段的听课状态；其特征在于，还包括以下步骤：

步骤五、对步骤二中所采集的课堂中老师的语音数据信息进行处理，提取老师此时所讲解的知识点，并结合步骤四中学生当前时间段的听课状态，得出学生对当前知识点的吸收程度；如果从学生的人信息中得到该学生已经掌握当前的知识点时，学生当前时间段的听课状态无论为差或者优，均判断得出学生对当前知识点的吸收程度为优；如果学生当前时间段的听课状态为优，无论从学生的人信息中得到该学生已经掌握或者未掌握当前的知识点时，得出学生对当前知识点的吸收程度为高；当得出学生当前时间段的听课状态为差时，并且从其个人信息中得到该学生未掌握当前的知识点时，得出学生对当前知识点的吸收程度为低;

步骤六、根据步骤五得到学生在每个时间段对知识点的吸收程度，判断未掌握的知识点，为学生推送未掌握的知识点习题，推送习题数目可由以下方式求得：假设习题库中其中一个知识点的题量为，设为学生课堂知识点吸收度评价，为知识点难易程度评价，为学生对当前知识点的掌握程度指标系数，分别为知识点难易程度评价和学生掌握程度评价的占比系数，最终学生获得习题数目。

2.根据权利要求1所述一种基于课堂情绪和行为分析的学习辅助方法，其特征在于，所述步骤三中的个人信息包括学生已经掌握的知识点。

3.一种基于课堂情绪和行为分析的学习辅助系统，其特征在于，包括数据采集模块、学生知识掌握检测模块、教师授课内容分析模块和学习推送模块，其中数据采集模块包括视频采集模块和音频采集模块；

视频采集模块，包括安置在教室的摄像头与后台视频储存设备，用于采集并储存课堂中学生的视频数据信息；

音频采集模块，包括安置在讲台上的录音设备与后台音频储存设备，用于采集并储存课堂中教师的语音数据信息；

学生知识掌握检测模块，通过人脸特征识别、人脸表情识别、人体姿态识别分析每个学生的上课状态并得到学生的知识点吸收程度；

教师授课内容分析模块，通过自然语言处理方法从教师的授课语音信息中提取教师的授课内容，并整理成知识点；

学习推送模块，将获得的学生行为数据与教师授课知识点相匹配，针对每个学生不同的行为数据推送相关的知识点以及配套习题，获得习题数目，其中，习题库中其中一个知识点的题量为，设为学生课堂知识点吸收度评价，为知识点难易程度评价，为学生对当前知识点的掌握程度指标系数，分别为知识点难易程度评价和学生掌握程度评价的占比系数。