[发明专利]一种基于数据增强的声场景辨识方法有效

专利信息
申请号: 201910201430.2 申请日: 2019-03-18
公开(公告)号: CN109978034B 公开(公告)日: 2020-12-22
发明(设计)人: 李艳雄;张聿晗;王武城;刘名乐 申请(专利权)人: 华南理工大学
主分类号: G06K9/62 分类号: G06K9/62;G10L21/0208;G10L25/03;G10L25/27;G10L25/45
代理公司: 广州市华学知识产权代理有限公司 44245 代理人: 李斌
地址: 510640 广*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 数据 增强 声场 辨识 方法
【说明书】:

发明公开了一种基于数据增强的声场景辨识方法,包括下列步骤:首先采集并标注不同声场景的音频样本;然后预处理,对音频样本进行预加重、分帧和加窗处理;接着进行数据增强,提取各音频样本的谐波源和冲击源,得到更充足的音频样本,从音频样本及其谐波源和冲击源中提取对数梅尔滤波器组特征,再将上述三个特征堆叠成一个三通道的高维特征,接着采用混合增强技术构造更丰富的训练样本;最后将上述三通道高维特征输入到Xception网络进行判决,辨识出各音频样本所对应的声场景。本发明的数据增强方法可以有效提高Xception网络分类器的泛化能力,稳定网络的训练过程。在对声场景进行辨识时,本方法可取得更优的辨识效果。

技术领域

本发明涉及音频信号处理和深度学习技术领域,具体涉及一种基于数据增强的声场景辨识方法。

背景技术

音频信号含有丰富的信息,并具有非接触性、自然性的优势。声场景则是音频信号在语义层面上的高级表示。声场景辨识的任务是将语义标签和音频流相关联,标识声音产生环境的类别。该技术能使智能设备根据声音感知周围环境,从而做出恰当的决策。目前音频数据海量增长,由于人工标注数据非常耗时耗力,因此有准确标签的音频样本非常少。没有标签的音频样本是不能直接用来训练分类器的。如何基于有限的有标签音频样本构造更加多样性的训练数据从而构建更具泛化能力的分类器,是目前声场景辨识任务需要解决的主要问题之一。目前主要采用人工标注的方式增加有标签数据的多样性,但人工标注成本非常高。另外,在不同的分类任务中需要重新标注数据样本,不具备通用性,使得人工标注的成本更加高。为了克服人工标注数据成本高、有标签训练数据不足的问题,目前亟待采用数据增强的方法,增加有限的有标签音频数据的多样性,从而提高对复杂分类器的适应性及其泛化能力。

发明内容

本发明的目的是为了解决现有技术中的上述缺陷,提供一种基于数据增强的声场景辨识方法,该方法对音频数据集进行数据增强处理,并将其相应堆叠后得到的三通道高维声学特征输入Xception网络分类器进行训练,训练完毕后对测试集数据进行测试,实现声场景辨识。

本发明的目的可以通过采取如下技术方案达到:

一种基于数据增强的声场景辨识方法,所述的声场景辨识方法包括:

S1、音频样本准备步骤,利用录音设备在不同声场景采集音频样本,并进行人工标注,然后将上述音频样本划分为训练集和测试集;

S2、预处理步骤,分别对训练集和测试集中音频样本进行预加重、分帧、加窗处理;

S3、数据增强步骤,分离各音频样本的谐波源和冲击源,再分别提取音频样本、谐波源、冲击源的对数梅尔滤波器组特征,再将上述三个对数梅尔滤波器组特征堆叠成一个三通道的高维特征,接着采用混合增强技术构造新的训练样本数据;

S4、声场景辨识步骤,将上述各音频样本的三通道高维特征输入已训练好的Xception网络,得到各音频样本的声场景类别。

进一步地,所述的S1、音频样本准备步骤过程如下:

S1.1、利用录音设备采集音频数据:在不同场景放置录音设备,记录相应场景的音频样本,其采样频率为16kHz,量化位数为16bit;

S1.2、划分数据集:将标注好的音频样本随机划分为不相交的训练集与测试集,其中训练集占比约为80%,测试集占比约为20%。

进一步地,所述的S2、预处理步骤过程如下:

S2.1、预加重:利用数字滤波器对输入音频进行滤波,该滤波器的传递函数为:

H(z)=1-az-1

其中a为常数,取值为0.96;

S2.2、分帧:将预加重后的音频按照帧长40ms切分成音频帧,帧移为20ms;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南理工大学,未经华南理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910201430.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top