[发明专利]音频内容修正的方法及其智能装置在审
申请号: | 201711269934.5 | 申请日: | 2017-12-05 |
公开(公告)号: | CN108257609A | 公开(公告)日: | 2018-07-06 |
发明(设计)人: | 王国腾 | 申请(专利权)人: | 北京小唱科技有限公司 |
主分类号: | G10L21/007 | 分类号: | G10L21/007 |
代理公司: | 北京卓唐知识产权代理有限公司 11541 | 代理人: | 唐海力;韩来兵 |
地址: | 100028 北京市朝阳区太*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 修正 时间偏移量 音频信息 基频 节奏特征 音频内容 智能装置 比对 模版 变调 变速 互相干扰 节奏分析 用户音频 整体分析 节奏 时间轴 采集 申请 分析 | ||
1.一种修正音频内容的方法,其特征在于,所述方法包括:
采集用户演唱的音频信息;
对所述音频信息进行基频分析得到基频特征,对所述音频信息进行节奏分析得到节奏特征;
对所述节奏特征与模版进行比对,得到时间偏移量序列;
对所述基频特征根据时间偏移量序列与模版进行比对,得到音高差序列;以及
对所述用户音频信息,根据时间偏移量序列和音高差序列进行变调变速处理,得到修正后的音频。
2.根据权利要求1所述的修正音频内容的方法,其特征在于,所述采集音频信息,包括:
所述的音频信息为用户演唱时干声的音频信息,其中,所述的干声为演唱者的原始声源。
3.根据权利要求1或2所述的修正音频内容的方法,其特征在于,所述对所述音频信息进行基频分析得到基频特征,对所述音频信息进行节奏分析得到节奏特征,包括:
对所述音频信息进行识别,得到所述音频信息中的歌词音节;
对每个所述歌词音节的发音时间节点进行标记,得到每个所述歌词音节对应的时间节点,其中,所述的歌词音节与其对应的时间节点即为所述的节奏特征。
4.根据权利要求1或2所述的修正音频内容的方法,其特征在于,所述对所述音频信息进行基频分析得到基频特征,对所述音频信息进行节奏分析得到节奏特征包括:
对所述音频信息进行功率谱运算并进行滤波处理,得到每个所述歌词音节的正弦信号;
根据所述正弦信号的波峰值得到所述基频的音高数值;以及
将所述的音高数值按时间顺序排列,得到所述的基频特征。
5.根据权利要求3或4所述的修正音频内容的方法,其特征在于,对所述节奏特征与模版进行比对,得到时间偏移量序列,包括:
对歌曲标准的干声音频文件进行识别,得到标准歌词音节和每个所述标准歌词音节的音高特征;
对所述标准歌词音节的发音时间节点进行标记,将所述音高特征通过时间顺序进行排列,得到模版。
6.根据权利要求5所述的修正音频内容的方法,其特征在于,对所述节奏特征与模版进行比对,得到时间偏移量序列,包括:
根据所述节奏特征中每个歌词音节的时间节点与所述模版中每个歌词的标准时间节点进行比对,得到时间偏移量序列,其中,所述时间偏移量序列为所述歌词音节的时间节点与对应的所述标准歌词音节时间节点的时间差序列。
7.根据权利要求5所述的修正音频内容的方法,其特征在于,所述对所述基频特征根据时间偏移量序列与模版进行比对,得到音高差序列,包括:
所述基频特征中每个歌词音节的音高特征根据所述时间偏移量序列与对应的模版中每个歌词音节的音高特征进行比对,得到音高差序列。
8.根据权利要求6或7所述的修正音频内容的方法,其特征在于,所述对所述用户音频信息,根据时间偏移量序列和音高差序列进行变调变速处理,得到修正后的音频文件,包括:
根据所述时间偏移量序列将所述歌词音节对应的时间节点进行变速修正,根据所述音高差序列将所述歌词音节对应的音高特征进行变调修正,得到修正后的音频文件。
9.一种智能装置,其特征在于,包括:
音频信息采集单元,用于采集用户演唱的音频信息;
特征分析单元,对所述音频信息进行基频分析得到基频特征,对所述音频信息进行节奏分析得到节奏特征;
特征比对单元,用于对所述节奏特征与模版进行比对,得到时间偏移量序列,对所述基频特征根据时间偏移量序列与模版进行比对,得到音高差序列;以及
修正处理单元,用于对所述用户音频信息,根据时间偏移量序列和音高差序列进行变调变速处理,得到修正后的音频文件。
10.根据权利要求9所述的智能装置,其特征在于,包括:
所述音频信息采集单元,还包括采集人演唱时干声的音频信息,其中,所述的干声为演唱者的原始声源;
所述特征分析单元,还包括对所述音频信息进行识别,得到所述音频信息中的歌词音节,对每个所述歌词音节的发音时间节点进行标记,得到每个所述歌词音节对应的时间节点,其中,所述的歌词音节与其对应的时间节点即为所述的节奏特征,对所述音频信息进行功率谱运算并进行滤波处理,得到每个所述歌词音节的正弦信号,根据所述正弦信号的波峰值得到所述基频的音高数值,将所述的音高数值按时间顺序排列,得到所述的基频特征;
所述特征比对单元,还包括根据所述节奏特征中每个歌词音节的时间节点与所述模版中每个歌词的标准时间节点进行比对,得到时间偏移量序列,其中,所述时间偏移量序列为所述歌词音节的时间节点与对应的所述标准歌词音节时间节点的时间差序列,所述基频特征中每个歌词音节的音高特征根据所述时间偏移量序列与对应的模版中每个歌词音节的音高特征进行比对,得到音高差序列;以及
所述修正处理单元,还包括根据所述时间偏移量序列将所述歌词音节对应的时间节点进行变速修正,根据所述音高差序列将所述歌词音节对应的音高特征进行变调修正,得到修正后的音频文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京小唱科技有限公司,未经北京小唱科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711269934.5/1.html,转载请声明来源钻瓜专利网。