[发明专利]音效控制方法、装置、电子设备及存储介质

说明书

本公开提供了一种音效控制方法、装置、电子设备及存储介质，其中，该方法包括：基于现实场景图像中呈现的实体乐器，在AR设备中展示与所述实体乐器对应的虚拟乐器模型；在检测到对所述AR设备中展示的虚拟乐器模型的敲击操作之后，识别所述敲击操作的敲击力度；基于所述敲击力度，确定所述敲击操作对应的音效的播放音量；控制所述AR设备按照所述播放音量播放与所述敲击操作对应的音效。

技术领域

本公开涉及计算机视觉技术领域，具体而言，涉及一种音效控制方法、装置、电子设备及存储介质。

背景技术

近年来，随着文化旅游行业的快速发展，越来越多的用户群体参观各类展会或者博物馆等。对于展会中的一些展示项目，比如展示的乐器等，出于保护展示的乐器的目的，通常是陈列在特定的展示区域供用户来观赏，不允许用户实际操作乐器。但是这种观赏方式很难感受展示的乐器带来的音乐效果，缺乏一定的互动性，导致展示效果较为枯燥。

发明内容

本公开实施例至少提供一种音效控制方法、装置、电子设备及存储介质。

第一方面，本公开实施例提供一种增强现实音效控制方法，包括：

基于现实场景图像中呈现的实体乐器，在增强现实AR设备中展示与所述实体乐器对应的虚拟乐器模型；

在检测到对所述AR设备中展示的虚拟乐器模型的敲击操作之后，识别所述敲击操作的敲击力度；

基于所述敲击力度，确定所述敲击操作对应的音效的播放音量；

控制所述AR设备按照所述播放音量播放与所述敲击操作对应的音效。

本公开实施例中，可以基于现实场景图像中呈现的实体乐器，在AR设备中展示实体乐器对应的虚拟乐器模型，还可以响应对虚拟乐器模型的敲击操作，并基于敲击操作的敲击力度来控制敲击操作对应的音效的播放音量，从而实现对虚拟乐器的模拟演奏。在应用于文化旅游行业时，对于一些乐器类的展示项目，可以在AR设备中展示虚拟乐器模型并基于敲击操作的敲击力度来控制虚拟乐器模型所播放的音效的音量，实现对虚拟乐器的模拟演奏，在保护展示项目的同时又使用户能够更加直观、清晰地了解实体乐器的演奏效果等，提升了参观展示项目过程中的用户体验，使参展过程更加富有互动性和趣味性。

本公开的一些实施例中，所述检测到对所述AR设备中的展示的虚拟乐器模型的敲击操作，包括：

基于所述现实场景图像，检测到在所述现实场景图像呈现的现实场景中出现目标肢体动作，将所述目标肢体动作确定为对所述虚拟乐器模型的所述敲击操作。

该实施方式中，可以基于用户做出的肢体动作来实现对虚拟乐器的敲击，加强了用户与展示项目之间的互动性，提升了参观展示项目过程中的用户体验。

本公开的一些实施例中，所述基于所述现实场景图像，检测到在所述现实场景图像呈现的现实场景中出现目标肢体动作，包括：

对所述现实场景图像中出现的肢体动作进行关键点识别，得到关键点识别结果；

基于关键点识别结果对所述肢体动作进行分类，得到所述肢体动作的类型；

若所述肢体动作的类型为预设的目标肢体动作类型，则确定所述现实场景图像呈现的现实场景中出现所述目标肢体动作。

该实施方式中，可以通过关键点识别技术以及肢体动作的分类技术，来准确地识别用户做出的肢体动作，以便在应用于虚拟乐器的模拟演奏时，能够准确地识别并响应敲击操作，提升用户体验度。

本公开的一些实施例中，所述识别所述敲击操作的敲击力度，包括：

检测所述目标肢体动作被执行过程中的加速度信息；

基于所述加速度信息，确定所述敲击操作的敲击力度。