[发明专利]音频混音方法、服务器及客户端有效
申请号: | 201810234914.2 | 申请日: | 2018-03-21 |
公开(公告)号: | CN110299144B | 公开(公告)日: | 2021-05-28 |
发明(设计)人: | 梁俊斌 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G10L19/008 | 分类号: | G10L19/008;G10L19/16;G10L21/0208 |
代理公司: | 北京励诚知识产权代理有限公司 11647 | 代理人: | 贾玉姣 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音频 方法 服务器 客户端 | ||
1.一种音频混音方法,其特征在于,包括:
接收各客户端发送的第一音频信号;
对接收到的所述第一音频信号进行全混音处理,得到全混音音频信号;
针对每个客户端,从所述全混音音频信号中,过滤来自所述客户端的经过全混音处理后的所述第一音频信号,得到所述客户端对应的所述混音音频信号;其中,所述混音音频信号中携带其他客户端经过全混音处理的所述第一音频信号;
向所述客户端发送所述混音音频信号,以使所述客户端进行播放;
所述从所述全混音音频信号中,过滤来自所述客户端的经过全混音处理后的所述第一音频信号,得到所述客户端对应的所述混音音频信号,包括:
分别对所述全混音音频信号和所述客户端的第一音频信号进行短时傅里叶变换,得到所述全混音音频信号的第一功率谱和所述第一音频信号的第二功率谱;
根据所述客户端的增益系数、所述第一功率谱和所述第二功率谱,计算所述客户端每个频点上当前帧的滤波系数;
根据每个频点上当前帧的滤波系数,对所述第二功率谱进行平滑滤波,得到第三功率谱;
对所述第三功率谱进行反傅里叶变换,得到所述客户端的所述混音音频信号;
所述对接收到的所述第一音频信号进行全混音处理之前,还包括:
对所述第一音频信号进行解码处理,得到解码后的所述第一音频信号;
所述向所述客户端发送所述混音音频信号,包括:
将所述混音音频信号进行编码,得到混音音频编码信号发送给所述客户端。
2.根据权利要求1所述的方法,其特征在于,所述第一音频信号携带标识信息;所述标识信息包括所述客户端的标识码和所述第一音频信号所对应的帧序列号;
则所述接收各客户端发送的第一音频信号之后,还包括:
缓存各客户端的所述第一音频信号;
所述从所述全混音音频信号中,过滤来自所述客户端的经过全混音处理后的所述第一音频信号之前,还包括:
根据所述标识信息,从缓存区内获取所述客户端对应的所述第一音频信号。
3.根据权利要求1所述的方法,其特征在于,所述对接收到的所述第一音频信号进行全混音处理,得到全混音音频信号,包括:
对所有客户端的所述第一音频信号进行防破音和线性叠加处理,得到所述全混音音频信号;或者,
获取每个客户端上所述第一音频信号的信号特征;
根据所述信号特征,从所有的所述第一音频信号中选取出参与全混音处理的目标第一音频信号;
对选取出的所有的所述目标第一音频信号进行防破音和线性叠加处理,得到所述全混音音频信号。
4.根据权利要求3所述的方法,其特征在于,所述进行防破音和线性叠加处理,包括:
获取参与全混音处理的每个客户端的增益系数;
将所述增益系数与对应客户端上的所述第一音频信号相乘,并将相乘后的结果进行线性叠加。
5.根据权利要求4所述的方法,其特征在于,所述获取参与全混音处理的每个客户端的增益系数,包括:
获取参与全混音处理的客户端的个数,根据所述客户端的个数确定每个参与全混音处理的客户端的所述增益系数。
6.根据权利要求1所述的方法,其特征在于,所述根据所述客户端的增益系数、所述第一功率谱和所述第二功率谱,计算所述客户端每个频点上当前帧的滤波系数,包括:
针对所述客户端的每个频点,获取所述频点的前一帧的滤波系数;
计算所述第二功率谱在所述频点上的功率值与所述第一功率谱在所述频点上功率值的第一比值;
根据所述第一比值和所述增益系数,计算得到所述频点的当前帧过滤滤波系数;
根据预设的平滑系数和所述过滤滤波系数,对所述前一帧滤波系数进行平滑处理,得到所述当前帧最终的所述滤波系数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810234914.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于识别语音说话人的装置及其方法
- 下一篇:一种单兵现场监控取证系统