[发明专利]虚拟形象生成方法、装置、存储介质及电子设备在审
| 申请号: | 202011462206.8 | 申请日: | 2020-12-11 |
| 公开(公告)号: | CN112650831A | 公开(公告)日: | 2021-04-13 |
| 发明(设计)人: | 闫嵩 | 申请(专利权)人: | 北京大米科技有限公司 |
| 主分类号: | G06F16/33 | 分类号: | G06F16/33;G06F40/30;G06K9/00;G06T13/80;G10L15/02;G10L15/16;G10L15/26 |
| 代理公司: | 北京恒博知识产权代理有限公司 11528 | 代理人: | 张晓芳 |
| 地址: | 100025 北京市朝*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 虚拟 形象 生成 方法 装置 存储 介质 电子设备 | ||
本申请公开了一种虚拟形象生成方法、装置、存储介质及电子设备,属于语音识别技术领域。所述虚拟形象生成方法包括:对音频数据进行自动语音识别ASR处理得到文本信息,对所述文本信息进行语义分析得到情感信息,根据所述情感信息确定对应的动作属性信息,根据所述动作属性信息生成虚拟形象。故本申请中基于语义识别确定音频数据的情感信息,确定动作属性信息,进而生成更自然、真实的动作表情的虚拟形象,解决了现有生成的虚拟形象不够真实,降低了互动体验的问题。
技术领域
本发明涉及语音识别技术领域,具体涉及一种虚拟形象生成方法、装置、存储介质及电子设备。
背景技术
目前,语音即语言的声音,由生物的发声器官发出,负载着一定的语言意义,因此,语音是一种特殊的音频,语音识别技术能够将语音中包含的语言意义进行提取,并转换成文本信息的格式,以便计算机存储和处理。当前用户可以通过语音识别技术方提供的语音识别算法对待识别语音进行自动识别,或者对待识别语音进行人工识别,来将待识别语音转换成对应的文本信息,再通过对该文本信息进行处理生成对应的嘴唇变化图像,以模拟说话时的嘴部动作的虚拟形象,虚拟形象合成可以应用在不同的场合,具有极大的商业价值,但现有技术基于音频数据生成的虚拟形象存在动作不自然、导致影响用户体验的问题,因此如何生成相应嘴部运动和面部表情自然变化的高质量虚拟形象是目前亟待解决的问题。
发明内容
本申请实施例提供了一种虚拟形象生成方法、装置、存储介质及电子设备,可基于语义识别确定音频内容,生成更自然的动作表情。所述技术方案如下:
第一方面,本申请实施例提供了一种虚拟形象生成方法,包括:
对音频数据进行自动语音识别ASR处理得到文本信息;
对所述文本信息进行语义分析得到情感信息;
根据所述情感信息确定对应的动作属性信息;其中,动作属性信息包括:头部动作属性信息、面部动作属性信息和肢体动作属性信息中的一种或多种;
根据所述动作属性信息生成虚拟形象。
第二方面,本申请实施例提供了一种虚拟形象生成装置,所述装置包括:
识别模块,用于对音频数据进行自动语音识别ASR处理得到文本信息;
分析模块,用于对所述文本信息进行语义分析得到情感信息;
确定模块,用于根据所述情感信息确定对应的动作属性信息;其中,动作属性信息包括:头部动作属性信息、面部动作属性信息和肢体动作属性信息中的一种或多种;
生成模块,用于根据所述动作属性信息生成虚拟形象。
第三方面,本申请实施例提供了一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述的方法步骤。
第四方面,本申请实施例提供了一种电子设备,包括:存储器和处理器;其中,所述存储器存储有计算机程序,所述计算机程序适用于由所述处理器加载并执行上述的方法步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括:
上述虚拟形象生成方法、装置、存储介质及电子设备工作时,对音频数据进行自动语音识别ASR处理得到文本信息,对所述文本信息进行语义分析得到情感信息,根据所述情感信息确定对应的动作属性信息,根据所述动作属性信息生成虚拟形象。本申请实施例基于语义识别确定音频数据的情感信息,确定动作属性信息,与原始虚拟形象进行融合生成更自然、真实的动作表情的虚拟形象。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京大米科技有限公司,未经北京大米科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011462206.8/2.html,转载请声明来源钻瓜专利网。





