[发明专利]音频模板的生成方法、服务器及存储介质在审
申请号: | 202310258009.1 | 申请日: | 2023-03-08 |
公开(公告)号: | CN116386592A | 公开(公告)日: | 2023-07-04 |
发明(设计)人: | 庄晓滨 | 申请(专利权)人: | 腾讯音乐娱乐科技(深圳)有限公司 |
主分类号: | G10L13/08 | 分类号: | G10L13/08;G10L13/02;G10L21/003;G10L21/007 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 冯右明 |
地址: | 518000 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音频 模板 生成 方法 服务器 存储 介质 | ||
本申请涉及一种音频模板的生成方法、服务器及存储介质。所述方法包括:获取目标音频以及目标音频对应的音符序列;确定各音频帧的初始基频特征;确定各音频帧的初始能量特征;以及确定各音符片段的音高特征;基于各音频帧的初始基频特征与对应匹配的音符片段的音高特征之间的统计数据,确定针目标音频的预测基频特征;以及,基于各音频帧的初始能量特征的统计数据,确定针对目标音频的预测能量特征;融合预测基频特征和预测能量特征,生成针对于目标音频的音频模板。采用本方法能够优体现出用户演唱的原始歌声的情感和特点,提升了生成的音频模板的自然度和感染力。
技术领域
本申请涉及计算机技术领域,特别是涉及一种音频模板的生成方法、服务器及存储介质。
背景技术
随着互联网技术的发展,歌声合成作为语音合成技术一个新的应用领域,其利用语音合成相关技术,让用户能够像专业歌手一样唱出优美动听的歌声。
在传统的歌声合成的方法中,一般是首先通过节奏判断算法来确定用户所演唱歌曲的节奏是否准确,然后,针对用户演唱的节奏为准确的部分,利用预设的标准基频来对用户演唱歌曲的基频进行调整;以及,针对用户演唱的节奏为不准确的部分,直接将标准基频作为用户演唱歌曲的基频,以进行歌曲模板的生成。
但是目前的歌声合成的方法中,会丢失过多用户演唱歌曲的基频,使得生成的歌曲模板比较机械,从而导致合成的歌声不能够准确的表达出用户演唱的原始歌声的情感和特点,使得合成的歌声缺乏自然度和感染力。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提升合成音频的自然度和感染力的音频模板的生成方法、音频模板的生成装置、服务器、存储介质及计算机程序产品。
根据本公开实施例的第一方面,提供一种音频模板的生成方法,包括:
获取目标音频以及所述目标音频对应的音符序列;所述音符序列由多个连续的音符片段组成,每个音符片段由多个连续的音频帧表达;
对所述目标音频中的各音频帧进行基频提取,确定各音频帧的初始基频特征;对所述目标音频中的各音频帧进行能量提取,确定各音频帧的初始能量特征;以及,对所述多个连续的音符片段进行音高提取,确定各音符片段的音高特征;
基于各所述音频帧的初始基频特征与对应匹配的所述音符片段的音高特征之间的统计数据,确定针对所述目标音频的预测基频特征;以及,基于各所述音频帧的初始能量特征的统计数据,确定针对所述目标音频的预测能量特征;
融合所述预测基频特征和所述预测能量特征,生成针对于所述目标音频的音频模板。
在一示例性实施例中,所述基于各所述音频帧的初始基频特征与对应匹配的所述音符片段的音高特征之间的统计数据,确定针对所述目标音频的预测基频特征,包括:
基于各所述音频帧的初始基频特征与对应匹配的所述音符片段的音高特征之间的统计数据,确定针对所述目标音频的音频抖动特征;
融合所述目标音频的音频抖动特征和各所述音符片段的音高特征,生成针对所述目标音频的预测基频特征。
在一示例性实施例中,所述初始基频特征包括对应所述音频帧的初始基频值,所述音高特征包括对应所述音符片段的初始音高值;
所述基于各所述音频帧的初始基频特征与对应匹配的所述音符片段的音高特征之间的统计数据,确定针对所述目标音频的音频抖动特征,包括:
在各所述音频帧的初始基频值与对应时间域上相匹配的所述音符片段的初始音高值中,确定两者的差值的绝对值;每一所述音符片段在对应时间域上与至少一个所述音频帧相匹配;
在每一所述音符片段对应相匹配的所述至少一个音频帧中,基于对应的各所述绝对值的大小,确定针对所述目标音频的抖动频率特征和抖动幅度特征;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯音乐娱乐科技(深圳)有限公司,未经腾讯音乐娱乐科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310258009.1/2.html,转载请声明来源钻瓜专利网。