[发明专利]补偿耳内音频信号的方法、电子装置及记录介质

权利要求书

1.一种补偿耳内音频信号的方法，适用于具有处理器的电子装置，所述电子装置连接至配置于使用者耳内的耳内麦克风及耳外的外部麦克风，该方法包括下列步骤：

在训练阶段利用所述耳内麦克风提取所述使用者说话时经由内耳传递的耳内音频信号，并利用所述外部麦克风提取所述使用者说话时经由空气传递的外部音频信号；

针对目标函数建立音频信号的机器学习模型，并使用所述耳内音频信号与所述外部音频信号训练所述机器学习模型，以提取所述耳内音频信号以及所述外部音频信号之间的音频信号特征；以及

在线上阶段使用所述耳内音频信号以及所述外部音频信号之间的所述音频信号特征将所述耳内麦克风提取的线上阶段耳内音频信号转换为补偿音频信号，并输出所述补偿音频信号。

2.如权利要求1所述的补偿耳内音频信号的方法，其中针对所述目标函数建立音频信号的所述机器学习模型，并使用所述耳内音频信号与所述外部音频信号训练所述机器学习模型的步骤包括：

设置所述耳内音频信号为所述机器学习模型的输入层，以及设置所述外部音频信号为所述机器学习模型的输出层；以及

通过所述输入层及所述输出层训练所述机器学习模型以提取所述耳内音频信号以及所述外部音频信号之间的音频信号特征。

3.如权利要求2所述的补偿耳内音频信号的方法，其中在线上阶段使用训练后的所述机器学习模型将所述耳内麦克风提取的所述耳内音频信号转换为所述补偿音频信号的步骤包括：

使用所述音频信号特征将所述耳内音频信号转换为所述补偿音频信号。

4.如权利要求1所述的补偿耳内音频信号的方法，其中所述机器学习模型包括卷积神经网络或深度神经网络。

5.如权利要求1所述的补偿耳内音频信号的方法，其中针对所述目标函数建立音频信号的所述机器学习模型，并使用所述耳内音频信号与所述外部音频信号训练所述机器学习模型的步骤包括：

基于语音质量设定所述目标函数以建立并训练语音质量模型，和/或基于语音的辨识率设定所述目标函数以建立并训练语音辨识度模型。

6.如权利要求5所述的补偿耳内音频信号的方法，还包括：

在线上阶段根据所述电子装置执行的应用程序决定使用训练后的所述语音质量模型与所述语音辨识度模型的至少其中之一将所述耳内音频信号转换为所述补偿音频信号。

7.如权利要求6所述的补偿耳内音频信号的方法，其中若所述电子装置执行的所述应用程序涉及语音通话，则使用所述语音质量模型将所述耳内音频信号转换为所述补偿音频信号。

8.如权利要求6所述的补偿耳内音频信号的方法，其中若所述电子装置执行的所述应用程序涉及语音辨识，则使用所述语音辨识度模型将所述耳内音频信号转换为所述补偿音频信号。

9.如权利要求8所述的补偿耳内音频信号的方法，还包括：

对转换后的所述补偿音频信号进行语音辨识，并输出语音辨识结果。

10.一种电子装置，包括：

连接装置，连接至配置于使用者耳内的耳内麦克风及耳外的外部麦克风；

存储装置，存储一或多个指令；以及

处理器，耦接至所述连接装置及所述存储装置，且经配置以执行所述指令以：

在训练阶段利用所述耳内麦克风提取所述使用者说话时经由内耳传递的耳内音频信号，并利用所述外部麦克风提取所述使用者说话时经由空气传递的外部音频信号；

针对目标函数建立音频信号的机器学习模型，并使用所述耳内音频信号与所述外部音频信号训练所述机器学习模型，以提取所述耳内音频信号以及所述外部音频信号之间的音频信号特征；以及

在线上阶段使用所述耳内音频信号以及所述外部音频信号之间的所述音频信号特征将所述耳内麦克风提取的线上阶段耳内音频信号转换为补偿音频信号，并输出所述补偿音频信号。

11.一种计算机可读记录介质，记录程序，经由处理器载入以执行下列步骤：

在训练阶段利用耳内麦克风提取使用者说话时经由内耳传递的耳内音频信号，并利用外部麦克风提取所述使用者说话时经由空气传递的外部音频信号；

针对目标函数建立音频信号的机器学习模型，并使用所述耳内音频信号与所述外部音频信号训练所述机器学习模型，以提取所述耳内音频信号以及所述外部音频信号之间的音频信号特征；以及

在线上阶段使用所述耳内音频信号以及所述外部音频信号之间的所述音频信号特征将所述耳内麦克风提取的线上阶段耳内音频信号转换为补偿音频信号，并输出所述补偿音频信号。