[发明专利]基于脸部动作识别的音乐数据处理方法及系统有效
申请号: | 201610912440.3 | 申请日: | 2016-10-19 |
公开(公告)号: | CN106503127B | 公开(公告)日: | 2019-09-27 |
发明(设计)人: | 简仁贤;何芳琳;赵伟翔;于庭婕;黄品瑞;廖健宏;陈智凯;孙廷伟;杨闵淳 | 申请(专利权)人: | 竹间智能科技(上海)有限公司 |
主分类号: | G06F16/683 | 分类号: | G06F16/683;G06F3/01 |
代理公司: | 北京酷爱智慧知识产权代理有限公司 11514 | 代理人: | 李娜 |
地址: | 200233 上海市浦东新区自由贸*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种基于脸部动作识别的音乐数据处理方法及系统,方法为:获得背景音乐数据和前景音乐数据,将前景音乐数据按节拍分成多段小节,每小节包含多个拍子;在前景音乐时间内检测人的面部动作,获得多个脸部动作数据,每个脸部动作对应一小节时间长度的前景音乐数据;将背景音乐数据进行持续播放,并将每个脸部动作数据与其对应的一小节时间长度的前景音乐数据进行匹配,并与背景音乐结合,生成新的音乐。本发明基于脸部动作识别的音乐数据处理方法及系统,采用了基于脸部关键点识别技术,将音乐数据和真实影像相结合的方式,实现人与相应场景的交互,不需要借助外部设置进行辅助,实现方式简单,提高了用户体验。 | ||
搜索关键词: | 基于 脸部 动作 识别 音乐 数据处理 方法 系统 | ||
【主权项】:
1.基于脸部动作识别的音乐数据处理方法,其特征在于,包括:步骤S1,获得背景音乐数据和前景音乐数据,所述背景音乐数据和所述前景音乐数据分别为一段数秒钟至数分钟长的音乐;步骤S2,将所述前景音乐数据按节拍分成多段小节,每小节包含多个拍子;步骤S3,在前景音乐时间内检测人的面部动作,获得在所述前景音乐时间内的多个脸部动作数据,每个脸部动作对应一小节时间长度的前景音乐数据;步骤S4,将所述背景音乐数据进行持续播放,并将所述每个脸部动作数据与其对应的所述一小节时间长度的前景音乐数据进行匹配,与所述背景音乐结合,生成新的音乐;所述步骤S2之后,还包括:将所述背景音乐数据进行持续播放,获得目标脸部动作数据,目标脸部动作数据对应唯一一小节前景音乐;根据所述目标脸部动作数据,获得在所述每小节开始的前后一拍时间内的脸部动作数据;将所述脸部动作数据与所述目标脸部动作数据进行匹配判定,进行一小节前景音乐播放的选取:当所述脸部动作数据与所述目标脸部动作数据匹配,播放所述一小节前景音乐,所述一小节前景音乐为与所述目标脸部动作数据唯一对应的前景音乐;当所述脸部动作数据与所述目标脸部动作数据不匹配,不播放所述脸部动作数据对应的一小节前景音乐。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于竹间智能科技(上海)有限公司,未经竹间智能科技(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610912440.3/,转载请声明来源钻瓜专利网。