[发明专利]基于自然文本的人机智能交互控制平台有效
申请号: | 201711329165.3 | 申请日: | 2017-12-13 |
公开(公告)号: | CN108597008B | 公开(公告)日: | 2021-08-31 |
发明(设计)人: | 宋胜利;周诗雨;蔺一帅;韩钊 | 申请(专利权)人: | 西安电子科技大学 |
主分类号: | G06T13/20 | 分类号: | G06T13/20;G06T13/40;G06F40/279 |
代理公司: | 北京盛凡智荣知识产权代理有限公司 11616 | 代理人: | 高志军 |
地址: | 710071 陕西省西安*** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 自然 文本 人机 智能 交互 控制 平台 | ||
1.基于自然文本的人机智能交互控制平台,包括混合控制语言脚本,其特征在于,人物动画不是直接与用户进行交互的,而是根据所述混合控制语言脚本进行控制,针对文本中不同字符类别转换为具有统一格式的混合控制语言脚本,并通过不同的解析方法得到不同的控制类别进行对应控制类别的效果展示,所述混合控制语言脚本采用的技术方案步骤如下:
步骤一,根据汉语的发音规律及发音时口型的相似性将声母及韵母按口型分类编码;
步骤二,制定动画词典、特殊符号词典和面部表情词典;
步骤三,对自然文本进行情感分析并生成对应的面部表情脚本;
步骤四,利用分词工具将自然文本进行分词;
步骤五,判断分词后的词语能否转换为对应的拼音文本;
步骤六,若词语能翻译成拼音,则根据关键字匹配动画词典判断分词后的各词语中有无触发肢体动画的词语,若有则在已生成的拼音脚本中插入肢体动画触发编码,然后将该词语翻译为拼音并插入到拼音脚本,否则直接将该词语翻译为拼音并插入到拼音脚本;
步骤七,将不能翻译为拼音的词语匹配特殊符号词典,若匹配成功则在拼音文本中插入对应的编码,否则插入默认编码;
步骤八,将拼音脚本中的拼音翻译为对应的口型编码,形成口型脚本;
步骤九,将生成的口型脚本和面部表情脚本进行组合生成最终的混合控制语言脚本;
步骤十,将最终生成的混合控制语言脚本发送到人机智能交互控制平台,控制虚拟人物模型的口型动画、面部表情、肢体动画的播放。
2.根据权利要求1所述的基于自然文本的人机智能交互控制平台,其特征在于,所述步骤二中的对于一些特殊符号,包括“+”、“%”,在发音时有对应的音节,不能直接转换为拼音,因此需要制定特殊符号转换规则来解决特殊符号的脚本问题,对于数字的处理根据正则表达式匹配分词后词语类型并按照相应转换规则将数字转换为拼音。
3.根据权利要求1所述的基于自然文本的人机智能交互控制平台,其特征在于,混合控制语言脚本格式分为口型动画、面部表情、肢体动画三类种型。
4.根据权利要求1所述的基于自然文本的人机智能交互控制平台,其特征在于,所述步骤十人机智能交互控制平台实时检测是否有混合控制语言脚本的输入,如果没有,系统中的人物循环播放“平常”动画,如果有混合控制语言脚本输入,就将新输入的脚本内容存入到一个队列里,人物模型实时访问这个队列并播放对应的口型动画、面部表情、肢体动画。
5.根据权利要求1所述的基于自然文本的人机智能交互控制平台,其特征在于,所述步骤二将声母及韵母按口型分类编码中,音节是汉语发音的基本单位,它由声母、韵母和声调三部分组成,其中声调主要控制的是高音的变化,在声母和韵母相同的情况下,声调对口型几乎没有影响,所以在设计汉语口型时,需要考虑的就是音节的声母和韵母部分。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西安电子科技大学,未经西安电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711329165.3/1.html,转载请声明来源钻瓜专利网。