[发明专利]一种互动音乐生成方法、装置、智能音箱及存储介质

说明书

本发明实施例公开了一种互动音乐生成方法、装置、智能音箱及存储介质，所述方法应用于智能音箱，包括：获取待处理视频，提取所述待处理视频中的图像帧；将所述图像帧输入至预先训练好的音乐生成模型中，获得所述音乐生成模型输出的互动音乐；将所述互动音乐进行播放。本发明实施例提供的互动音乐生成方法通过训练音乐生成模型根据待处理视频生成相应的互动音乐，丰富了智能音箱的互动方式，提高了智能音箱的交互性能。

技术领域

本发明实施例涉及智能家居领域，尤其涉及一种互动音乐生成方法、装置、智能音箱及存储介质。

背景技术

随着智能时代的开启，物联网技术越来越受到大家的关注，除了技术本身的前沿性外，最重要的是实现万物互联互通，方便人们的生活体验。智能音箱作为人机智能交互的典型入口，人们可以通过语音与智能音箱间实施交互来满足人们日常生活需求，诸如听歌、打电话、定闹钟、听广播等。最近随着带屏智能音箱的出现，人们除了与智能音箱间实现基本的语音交互外，还能在视觉层面上实现与智能音箱间的多模态交互。

在实现本发明的过程中，发明人发现现有技术中至少存在以下技术问题：智能带屏音箱中除了具有普通音箱所拥有的功能外，还有在视觉上的新体验。目前针对市场上的带屏智能音箱给用户在视频方面的体验仅仅限于通过检索来播放用户所需的网上视频资源(如综艺节目、电视剧、电影、娱乐短视频等)。但随着用户对智能音箱使用次数的增加，可能会大幅降低用户对已熟悉的功能的感兴趣度，如何增加智能音箱的互动性能成为一个亟待解决的技术问题。

发明内容

本发明实施例提供了一种互动音乐生成方法、装置、智能音箱及存储介质，以丰富音箱的互动方式，提高音箱的交互性能。

第一方面，本发明实施例提供了一种互动音乐生成方法，应用于智能音箱，包括：

获取待处理视频，提取所述待处理视频中的图像帧；

将所述图像帧输入至预先训练好的音乐生成模型中，获得所述音乐生成模型输出的互动音乐；

将所述互动音乐进行播放。

第二方面，本发明实施例还提供了一种互动音乐生成装置，包括：

图像帧获取模块，用于获取待处理视频，提取所述待处理视频中的图像帧；

互动音乐生成模块，用于将所述图像帧输入至预先训练好的音乐生成模型中，获得所述音乐生成模型输出的互动音乐；

互动音乐播放模块，用于将所述互动音乐进行播放。

第三方面，本发明实施例还提供了一种智能音箱，所述音箱包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例所提供的互动音乐生成方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例所提供的互动音乐生成方法。

本发明实施例通过获取待处理视频，提取所述待处理视频中的图像帧；将所述图像帧输入至预先训练好的音乐生成模型中，获得所述音乐生成模型输出的互动音乐；将所述互动音乐进行播放，通过训练音乐生成模型用于根据待处理视频生成相应的互动音乐并播放，丰富了智能音箱的互动方式，提高了智能音箱的交互性能。

附图说明

图1a是本发明实施例一所提供的一种互动音乐生成方法的流程图；

图1b是本发明实施例一所提供的一种互动音乐生成方法的流程示意图；