[发明专利]一种音频处理方法、穿戴式设备

权利要求书

1.一种音频处理方法，其特征在于，应用于穿戴式设备，所述音频处理方法包括：

获取音频数据和图像数据；

基于所述图像数据确定声源方向；

根据所述声源方向分别对所述音频数据进行波束成形处理。

2.根据权利要求1所述的方法，其特征在于，所述基于所述图像数据确定声源方向之前，所述音频处理方法还包括：

基于所述图像数据构建地图；

基于所述地图构建确定所述穿戴式设备的位姿；

对应的，所述基于所述图像数据确定声源方向，包括：识别所述图像数据中的声源目标；根据所述声源目标、所述位姿和所述地图，确定所述声源方向。

3.根据权利要求2所述的方法，其特征在于，所述识别所述图像数据中的声源目标之后，所述方法还包括：

识别所述图像数据中所述声源目标的类型；

若确定所述声源目标的类型为人物，识别所述人物的口部特征；

若所述口部特征表征所述人物未发声，将所述人物从所述声源目标中剔除。

4.根据权利要求2所述的方法，其特征在于，所述基于所述图像数据构建地图之后，所述方法还包括：

获取所述穿戴式设备的惯性测量数据；

基于所述惯性测量数据和所述地图确定所述穿戴式设备的位姿。

5.根据权利要求1所述的方法，其特征在于，所述穿戴式设备包括麦克风阵列，所述麦克风阵列包括多个麦克风，所述音频数据包括不同所述麦克风分别采集的子音频数据，所述根据所述声源方向对所述音频数据进行波束成形处理，包括：

基于所述声源方向、不同所述麦克风之间的预设位置关系，确定各所述麦克风各自对应的波束成形的时延参数；

基于所述各自对应的时延参数和不同所述子音频数据进行波束成形处理。

6.一种穿戴式设备，其特征在于，包括：

图像采集件，用于采集图像数据；

麦克风阵列，包括多个麦克风，不同所述麦克风分别布设在所述穿戴式设备上的不同位置，所述麦克风阵列用于采集音频数据；

处理器，分别与所述图像采集件和所述麦克风阵列连接，所述处理器用于执行如权利要求1－5任一项所述的音频处理方法。

7.根据权利要求6所述的穿戴式设备，其特征在于，所述穿戴式设备包括眼镜部件，所述图像采集件设置在所述眼镜部件内，所述眼镜部件与所述处理器连接。

8.根据权利要求6所述的穿戴式设备，其特征在于，所述穿戴式设备还包括助听模块和扬声器，所述助听模块包括波束成形处理单元和滤波器组件，所述波束成型处理单元与所述处理器连接；所述波束成形处理单元和所述滤波器组件连接，所述滤波器组件与所述扬声器连接，所述波束成形处理单元用于对麦克风阵列采集的音频数据做波束成形处理，所述滤波器组件用于对波束成形处理后的所述音频数据进行滤波，所述扬声器用于对滤波后的所述音频数据进行播放。

9.根据权利要求8所述的穿戴式设备，其特征在于，所述穿戴式设备还包括耳机组件，所述麦克风阵列、所述助听模块和所述扬声器设置于所述耳机组件内。

10.根据权利要求6所述的穿戴式设备，其特征在于，所述穿戴式设备还包括：惯性测量组件，所述惯性测量组件与所述处理器连接，所述惯性测量组件用于采集所述穿戴式设备的惯性测量数据。

11.一种计算机可读存储介质，其特征在于，所述可读存储介质中存储有计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行如权利要求1－5任一项所述的方法。