[发明专利]音乐作品的生成方法、装置、设备及存储介质在审
| 申请号: | 202110285844.5 | 申请日: | 2021-03-17 |
| 公开(公告)号: | CN113053336A | 公开(公告)日: | 2021-06-29 |
| 发明(设计)人: | 刘奡智;党艺飞;韩宝强;肖京 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
| 主分类号: | G10H1/00 | 分类号: | G10H1/00;G10L21/007 |
| 代理公司: | 北京市京大律师事务所 11321 | 代理人: | 姚维 |
| 地址: | 518033 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 音乐作品 生成 方法 装置 设备 存储 介质 | ||
本发明涉及人工智能技术领域,公开了一种音乐作品的生成方法、装置、设备及存储介质,用于根据预置的矢量量化变分自动编码VQ‑VAE模型和原始音频数据生成音乐作品,提高了音乐生成效率,提升了音高和节奏的准确度,使音乐作品更有独特性和表现力。音乐作品的生成方法包括:获取原始数据,原始数据为待处理的音频数据;调用预置的自回归离散自编码器对原始数据进行特征提取,生成查询向量,查询向量用于查询关键信息;将查询向量进行量化处理,得到量化向量,量化向量包括数量化的音高和节奏信息;调用预置的矢量量化变分自动编码VQ‑VAE模型,将查询向量和量化向量代入预置的公式,计算并得到目标数据;将目标数据输入预置的解码器,生成音乐作品。
技术领域
本发明涉及音频转换领域,尤其涉及一种音乐作品的生成方法、装置、设备及存储介质。
背景技术
音乐是用组织音构成的听觉意象,是表达人们的思想感情与社会现实生活的一种艺术形式,远非机械的节奏与音高的输出。音乐的作用很大程度上来源于其的感染力,这种感染力来自于每位演奏家独特的乐曲处理方式和演奏风格,不同演奏者会将自己的经历和对乐曲的独特理解带入演奏中,从而产生具有感染力的音乐效果。
在现有技术中,通过将乐谱展示作为输入生成乐曲,忽略了音乐表演情感和表达上的独特性,具体表现为节奏的准确性和音高的控制,并且只能处理有限种类的乐器,造成了音乐效果的损失。
发明内容
本发明提供了一种音乐作品的生成方法,用于根据预置的矢量量化变分自动编码VQ-VAE模型和原始音频数据生成音乐作品,提高了音乐生成效率,提升了音高和节奏的准确度,使音乐作品更有独特性和表现力。
本发明第一方面提供了一种音乐作品的生成方法,包括:获取原始数据,所述原始数据为待处理的音频数据;调用预置的自回归离散自编码器对所述原始数据进行特征提取,生成查询向量,所述查询向量用于查询关键信息;将所述查询向量进行量化处理,得到量化向量,所述量化向量包括数量化的音高和节奏信息;调用预置的矢量量化变分自动编码VQ-VAE模型,将所述查询向量和所述量化向量代入预置的公式,计算并得到目标数据;将所述目标数据输入预置的解码器,生成音乐作品。
可选的,在本发明第一方面的第一种实现方式中,所述调用预置的矢量量化变分自动编码VQ-VAE模型,将所述查询向量和所述量化向量代入预置的公式,计算并得到目标数据包括:基于所述查询向量和所述量化向量按照预置的公式计算并得到目标数据,所述预置的公式为:
LVQ-VAE=-logp(x|q')+(q'-[q])2+β([q']-q)2;其中,LVQ-VAE为损失函数,p(x|q')为所述量化向量q'在分类x的情况下出现的概率,q为所述查询向量,q'为所述量化向量,β为所述查询向量与所述量化向量之差的平均值的权重。
可选的,在本发明第一方面的第二种实现方式中,所述调用预置的自回归离散自编码器对所述原始数据进行特征提取,生成查询向量,所述查询向量用于查询关键信息包括:将所述原始数据输入预置的自回归离散自编码器,所述预置的自回归离散自编码器直接将原始数据作为学习的对象;对所述原始数据进行特征提取,得到多个目标特征,并基于预置的算法将所述多个目标特征转换为初始向量;对所述初始向量进行过滤处理,生成查询向量,所述查询向量用于查询关键信息。
可选的,在本发明第一方面的第三种实现方式中,所述对所述原始数据进行特征提取,得到多个目标特征,并基于预置的算法将所述多个目标特征转换为初始向量包括:基于预置的自回归离散自编码器,对所述原始数据进行特征提取,得到多个初始特征;调用预置的音乐知识库对所述多个初始特征进行归一化处理,得到多个目标特征,所述多个目标特征包括音高、节奏、速度和音色;将所述多个目标特征按照预置的算法进行转换,得到初始向量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110285844.5/2.html,转载请声明来源钻瓜专利网。





