[发明专利]培训质量评估方法、装置、设备及介质

权利要求书

1.一种培训质量的评估方法，其特征在于，所述方法包括：

采集上课时学员的人脸特征，通过所述人脸特征，获取学员的上课关注度；和/或

采集上课时课堂的声学特征，通过所述声学特征，获取学员的上课参与度；和/或

采集上课时学员的生理参数，通过所述生理参数，获取学员的上课互动度；

将获取的学员的上课关注度、上课参与度、上课互动度中的至少一项输入至预先训练得到的神经网络中，以进行培训质量的评估，获取培训质量分数。

2.根据权利要求1所述的方法，其特征在于，所述采集上课时学员的人脸特征，通过所述人脸特征，获取学员的上课关注度的步骤，具体包括：

采集学员上课视频，获取人脸特征，通过预先训练的第一模型，识别判断眼睛关注老师或者黑板的数量，以及时长；

根据所识别判断出的眼睛关注老师或者黑板的数量和时长，获取学员的上课关注度。

3.根据权利要求2所述的方法，其特征在于，所述第一模型采用如下方法生成：

采集一定量的学员上课视频；

基于时间轴，将每一段视频按照预设方式，切割成不同尺寸的小图片，以获得图像信息；

获取图像信息中学员眼睛关注老师或者黑板的数量和时长的特征；

以学员上课的视频和获取的该视频中学员眼睛关注老师或者黑板的数量和时长为样本，进行离线训练，以获得第一模型。

4.根据权利要求3所述的方法，其特征在于，所述图像信息中学员眼睛关注老师或者黑板的数量和时长的特征包括：

局部二值模式特征、尺度不变特征转换、方向梯度直方图特征中的至少一种。

5.根据权利要求3所述的方法，其特征在于，所述第一模型为分类器。

6.根据权利要求1所述的方法，其特征在于，所述采集上课时课堂的声学特征，通过所述声学特征，获取学员的上课参与度的步骤，具体包括：

采集学员上课时的声音，获取声音特征，通过预先训练的第二模型，判断学员与老师语言互动的人数和时长；

根据判断出的学员与老师语言互动的人数和时长，获取学员的上课参与度。

7.根据权利要求6所述的方法，其特征在于，所述第二模型采用如下方法生成：

采集上课的每一个学员的声音特征，并将学员的声音特征进行混音，得到每一个学员的声音特征和多个混音特征；

以每一个学员的声音特征和混音特征，与对应的学员与老师语言互动的人数和时长为样本，进行MFCC倒谱图训练，以获得第二模型。

8.根据权利要求7所述的方法，其特征在于，所述第二模型包括马尔科夫模型和/或多项式分类器模型。

9.根据权利要求1所述的方法，其特征在于，所述采集上课时学员的生理参数，通过所述生理参数，获取学员的上课互动度的步骤，具体包括：

采集学员的上课时生理参数特征，通过预先训练的第三模型，获取学员的互动频次和时长；

根据所获取的学员的互动频次和时长，获取学员的上课互动度。

10.根据权利要求9所述的方法，其特征在于，所述第三模型为分类器。

11.一种培训质量的评估装置，其特征在于，包括：

上课关注度获取单元，用于采集上课时学员的人脸特征，通过所述学员的人脸特征，获取学员的上课关注度；和/或

上课参与度获取单元，用于采集上课时课堂的声学特征，通过所述声学特征，获取学员的上课参与度；和/或

上课互动度获取单元，用于采集上课时学员的生理参数，通过所述生理参数，获取学员的上课互动度；

培训质量分数获取模块，用于将获取的学员的上课关注度、上课参与度、上课互动度中的至少一项输入至预先训练得到的神经网络中，以进行培训质量的评估，获取培训质量分数。