[发明专利]一种口型示教系统与示教方法有效
| 申请号: | 201310742813.3 | 申请日: | 2013-12-27 |
| 公开(公告)号: | CN103745423A | 公开(公告)日: | 2014-04-23 |
| 发明(设计)人: | 孟濬;黄吉羊;刘琼 | 申请(专利权)人: | 浙江大学 |
| 主分类号: | G06Q50/20 | 分类号: | G06Q50/20;G06T7/00;G09B5/02 |
| 代理公司: | 浙江杭州金通专利事务所有限公司 33100 | 代理人: | 刘晓春 |
| 地址: | 310027*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 口型 系统 方法 | ||
1.一种口型示教系统,其特征在于:所示的口型示教系统包括信息输入模块、视频采集模块、口型变换模块、对比评价模块、信息显示模块和数据存储模块,其中:
所述的信息输入模块用于录入用户信息和每次示教的示教匹配内容,所述的用户信息包括用户名和用户脸部照片;
所述的视频采集模块用于在示教前采集样例口型视频以及在示教过程中采集用户的模仿口型视频;
所述的口型变换模块用于根据用户脸部照片对每次采集到的样例口型视频进行基于环形弹性空间的动力学时间演化,生成示教口型视频;
所述的对比评价模块用于将示教过程中用户的模仿口型视频和样例口型视频进行基于环形弹性空间的动力学时间分析,得出对比评价结果,所述的对比评价结果包括用户学习效果评价和改进建议,为文字或图片或文字和图片的组合;
所述的信息显示模块用于实时显示示教过程中的所有信息,包括用户信息、每次示教的示教匹配内容、示教口型视频和对比评价结果;
所述的数据存储模块用于存储用户数据,所述的用户数据包括用户信息、每次示教的示教匹配内容、样例口型视频、模仿口型视频、示教口型视频和对比评价结果。
2.根据权利要求1所述的口型示教系统,其特征在于:所述的视频采集模块为具有摄像功能的终端。
3.根据权利要求2所述的口型示教系统,其特征在于:所述的具有摄像功能的终端选自摄像机、照相机、摄像头、数字化图像设备、智能终端的任意一种或任意多种。
4.根据权利要求1所述的口型示教系统,其特征在于:所述的口型变换模块为具有视频图像处理和信息分析能力的终端。
5.根据权利要求1所述的口型示教系统,其特征在于:所述的对比评价模块为具有视频图像处理和信息分析能力的终端。
6.根据权利要求1所述的人体口型视频重构系统,其特征在于:所述的信息显示模块选自显示器、显示屏、投影仪、智能终端的任意一种或任意多种。
7.根据权利要求1所述的口型示教系统,其特征在于:所述的口型示教系统为至少一台具有摄像功能的台式电脑、笔记本电脑或移动智能终端。
8.根据权利要求1所述的口型示教系统,其特征在于:所述的口型示教系统为一台智能手机。
9.根据权利要求1所述的口型示教系统的示教方法,其特征在于包括以下步骤:
(1)用户选择:根据用户名在数据存储模块中选择本次示教的对象,若本次示教的对象为数据存储模块中已经录入的用户,则直接进行选择;若本次示教的对象为数据存储模块中尚未录入的用户,则通过信息输入模块录入其用户信息再进行选择,所述的用户信息包括用户名和用户脸部照片;
(2)样例选取:若本次示教的样例口型视频和示教匹配内容已经存储在数据存储模块中该用户名下,则直接选取已存储的样例口型视频和示教匹配内容;若本次示教的样例口型视频和示教匹配内容没有包含在数据存储模块该用户名下,则通过视频采集模块采集本次示教的样例口型视频,通过信息输入模块读入本次示教的示教匹配内容,并且将本次示教的样例口型视频和示教匹配内容存入数据存储模块中该用户名下,然后选取存入的样例口型视频和示教匹配内容;
(3)口型变换:口型变换模块调用步骤(2)中选取的样例口型视频,基于用户脸部照片进行基于环形弹性空间的动力学时间演化,实现样例口型在用户脸部照片上的视频反演,生成示教口型视频;
(4)实时示教:信息显示模块实时显示步骤(3)生成的示教口型视频和步骤(2)选取的示教匹配内容进行示教,用户根据信息显示模块显示的内容进行模仿学习,同时,视频采集模块采集用户的模仿口型视频,直至示教结束;
(5)效果评估:对比评价模块根据示教口型视频和示教过程中录入的用户模仿口型视频,通过基于环形弹性空间的动力学时间分析得出对比评价结果反馈给用户,所述的对比评价结果包括用户学习效果评价和改进建议,为文字或图片或文字和图片的组合。
10.根据权利要求8所述的口型示教系统的示教方法,其特征在于包括以下步骤:
(1)用户选择:根据用户名在智能手机存储单元中选择本次示教的对象,若本次示教的对象为智能手机存储单元中已经录入的用户,则直接进行选择;若本次示教的对象为智能手机存储单元中尚未录入的用户,则通过智能手机触摸屏和摄像头录入其用户信息再进行选择,所述的用户信息包括用户名和用户脸部照片;
(2)样例选取:若本次示教的样例口型视频和示教匹配内容已经存储在智能手机存储单元中该用户名下,则直接选取已存储的样例口型视频和示教匹配内容;若本次示教的样例口型视频和示教匹配内容没有包含在智能手机存储单元该用户名下,则通过智能手机摄像头采集本次示教的样例口型视频,通过智能手机触摸屏或其他输入设备读入本次示教的示教匹配内容,并且将本次示教的样例口型视频和示教匹配内容存入智能手机存储单元中该用户名下,然后选取存入的样例口型视频和示教匹配内容;
(3)口型变换:智能手机处理器调用步骤(2)中选取的样例口型视频,基于用户脸部照片进行基于环形弹性空间的动力学时间演化,实现样例口型在用户脸部照片上的视频反演,生成示教口型视频;
(4)实时示教:智能手机显示屏实时显示步骤(3)生成的示教口型视频和步骤(2)选取的示教匹配内容进行示教,用户根据智能手机显示屏显示的内容进行模仿学习,同时,智能手机摄像头采集用户的模仿口型视频,直至示教结束;
(5)效果评估:智能手机处理器根据示教口型视频和示教过程中录入的用户模仿口型视频,通过基于环形弹性空间的动力学时间分析得出对比评价结果反馈给用户,所述的对比评价结果包括用户学习效果评价和改进建议,为文字或图片或文字和图片的组合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大学,未经浙江大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310742813.3/1.html,转载请声明来源钻瓜专利网。





