[发明专利]外语教学评价信息生成方法以及装置在审
申请号: | 201810308933.5 | 申请日: | 2018-04-09 |
公开(公告)号: | CN108537702A | 公开(公告)日: | 2018-09-14 |
发明(设计)人: | 陈铿帆;杨宁;卢炀 | 申请(专利权)人: | 深圳市鹰硕技术有限公司 |
主分类号: | G06Q50/20 | 分类号: | G06Q50/20;G09B5/06 |
代理公司: | 北京和信华成知识产权代理事务所(普通合伙) 11390 | 代理人: | 胡剑辉 |
地址: | 518100 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 口型 测试信息 发音信息 唇部 外语教学 评价信息 视频画面 视频信号 特征偏差 外语 匹配 视频采集设备 抓取 标准发音 存储介质 电子设备 教学评价 音频信息 预先建立 采集 输出 检测 教学 | ||
1.一种外语教学评价信息生成方法,其特征在于,所述方法包括:
输出外语测试信息,检测视频采集设备采集的视频信号,分别提取所述视频信号中的视频画面信息以及音频信息;
对所述视频画面信息中的用户唇部进行定位,并抓取所述用户唇部的口型特征;
在预先建立的外语测试信息与发音信息模型中匹配与所述外语测试信息对应的发音信息,所述发音信息包括标准发音以及标准口型特征;
计算所述用户唇部的口型特征与匹配到的所述标准口型特征的第一特征偏差值,根据所述第一特征偏差值生成教学评价信息。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
分析所述音频信息,识别所述音频信息中的用户发音;
计算所述用户发音与匹配到的所述标准发音的第二特征偏差值;
根据所述第一特征偏差值以及第二特征偏差值所述生成教学评价信息。
3.如权利要求2所述的方法,其特征在于,根据所述第一特征偏差值以及第二特征偏差值生成教学评价信息,包括:
根据所述第一特征偏差值生成得分信息;
将所述得分信息作为教学评价信息。
4.如权利要求1所述的方法,其特征在于,所述方法还包括:
判断所述第一特征偏差值是否满足预设偏差条件;
若所述特征偏差值满足预设偏差条件,根据所述第一特征偏差值生成教学评价信息,包括:
根据所述第一特征偏差值得到第一偏差信息;
根据所述第一偏差信息以及匹配到的标准发音以及标准口型特征生成教学评价信息。
5.如权利要求4所述的方法,其特征在于,所述方法还包括:
对满足预设偏差条件的口型特征区域增加提示标识;
根据所述增加提示标识的口型特征生成教学评价信息,并控制所述教学评价信息在用户显示设备上显示。
6.如权利要求1所述的方法,其特征在于,对所述视频画面信息中的用户唇部进行定位,包括:
识别并定位所述视频画面信息中的用户面部轮廓;
对面部轮廓中指定区域使用唇色过滤器对用户唇部进行定位并跟踪。
7.如权利要求1所述的方法,其特征在于,所述口型特征包括唇部轮廓、唇部口径、唇部张角、唇高以及唇宽。
8.如权利要求7所述的方法,其特征在于,在预先建立的外语测试信息与发音信息模型中匹配与所述外语测试信息对应的发音信息,包括:
根据所述唇部轮廓、唇部口径、唇部张角、唇高以及唇宽的至少一项进行几何建模,形成矢量化口型特征;
将所述矢量化口型特征与所述标准口型特征进行匹配。
9.如权利要求3所述的方法,其特征在于,所述方法还包括:
判断所述得分信息是否小于预设分数;
若是,保存所述得分信息以及与所述得分信息对应的外语测试信息以及发音信息;
根据保存的所述得分信息以及对应的外语测试信息以及发音信息训练外语练习模型;
定期将所述外语练习模型中的外语测试信息以及发音信息发送至用户,以进行外语强化练习。
10.一种外语教学评价信息生成装置,其特征在于,所述装置包括:
信号检测模块,用于输出外语测试信息,检测视频采集设备采集的视频信号,分别提取所述视频信号中的视频画面信息以及音频信息;
特征抓取模块,用于对所述视频画面信息中的用户唇部进行定位,并抓取所述用户唇部的口型特征;
信息匹配模块,用于在预先建立的外语测试信息与发音信息模型中匹配与所述外语测试信息对应的发音信息,所述发音信息包括标准发音以及标准口型特征;
信息生成模块,用于计算所述用户唇部的口型特征与匹配到的所述标准口型特征的第一特征偏差值,根据所述第一特征偏差值生成教学评价信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市鹰硕技术有限公司,未经深圳市鹰硕技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810308933.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种学校管理系统
- 下一篇:一种消防单位的训练考核数据管理方法及相关装置