[发明专利]增强虚拟现实的音频效果的方法和电子装置

权利要求书

1.一种增强虚拟现实的音频效果的方法，其特征在于，包括：

接收在虚拟现实环境中的数据，所述数据与来自一个或多个声源的音频样本、所述一个或多个声源的运动、以及用户的运动相关；

基于接收的所述数据执行用于实现一个或多个音频效果的物理模拟；

使用所述物理模拟的结果来执行信号处理；以及

使用所述信号处理的结果来生成音频输出。

2.根据权利要求1所述的方法，其特征在于，所述执行用于实现一个或多个音频效果的物理模拟的步骤包括：

生成所述音频样本的样本波前；

扩展所述样本波前；以及

基于在所述虚拟现实环境中在所述用户附近观察到的所述样本波前中的相应的一个，来确定所述音频样本的每个的频率偏移类型和偏移程度。

3.根据权利要求2所述的方法，其特征在于，所述执行用于实现一个或多个音频效果的物理模拟的步骤还包括：

模拟关于来自所述一个或多个声源的所述音频样本的声音的传输时间。

4.根据权利要求2所述的方法，其特征在于，所述执行信号处理的步骤包括：

对于所述一个或多个声源的每个声源，执行以下操作：根据相应的所述频率偏移类型和相应的所述偏移程度对所述音频样本的每个进行重采样，以提供重采样的音频样本；以及通过对所述一个或多个音频效果进行滤波来对所述重采样的音频样本执行样本渲染，以提供最终样本；以及

混合来自所述一个或多个声源的所述最终样本以生成所述音频输出。

5.根据权利要求4所述的方法，其中所述样本波前中的每一个表示所述音频样本的相应的样本集合，且对所述音频样本的每一个的所述重采样包括重采样所述音频样本的多个样本集合。

6.根据权利要求1所述的方法，其特征在于，

所述执行用于实现一个或多个音频效果的物理模拟的步骤包括：模拟与在所述虚拟现实环境中所述用户经历的多普勒效应有关的物理学，以获得关于所述音频样本的每个的频率偏移类型和偏移程度的信息；以及

所述执行信号处理的步骤包括：通过根据所述音频样本的每个的相应的所述频率偏移类型和相应的所述偏移程度，来对所述音频样本进行重采样，以修正所述音频样本。

7.根据权利要求6所述的方法，其特征在于，所述频率偏移类型包括向上偏移或向下偏移，其中所述向上偏移是由于在所述虚拟现实环境中所述用户与所述一个或多个声源中的至少一个之间的距离减小，并且所述向下偏移是由于在所述虚拟现实环境中所述用户和所述一个或多个声源中的所述至少一个之间的所述距离增加。

8.根据权利要求1所述的方法，其特征在于，所述执行用于实现一个或多个音频效果的物理模拟的步骤包括：模拟所述一个或多个声源的一个或多个行为和所述用户的一个或多个行为沿时间轴随着时间的改变。

9.根据权利要求8所述的方法，其特征在于，所述模拟所述一个或多个声源的一个或多个行为和所述用户的一个或多个行为沿时间轴随着时间的改变的步骤包括：

执行多个任务以实现在所述虚拟现实环境中所述用户经历的多普勒效应，所述多个任务包括：

生成所述音频样本的样本波前；

扩展所述样本波前；

基于在所述虚拟现实环境中在所述用户附近观察到的所述样本波前中的相应的一个，来确定所述音频样本的每个的频率偏移类型和偏移程度；

对于所述一个或多个声源的每个声源，执行包括以下的操作：根据相应的所述频率偏移类型和相应的所述偏移程度对所述音频样本的每个进行重采样，以提供重采样的音频样本；以及通过对所述一个或多个音频效果进行滤波来对所述重采样的音频样本执行样本渲染，以提供最终样本；以及

混合来自所述一个或多个声源的所述最终样本以生成所述音频输出；

其中，调度器基于来自定时器的时间信息来确定用于执行每个所述任务的时机并触发执行。

10.根据权利要求9所述的方法，其特征在于，所述执行多个任务以实现在所述虚拟现实环境中所述用户经历的多普勒效应的步骤包括：

将用于所述任务的每个的流程划分成相应的多个子流程，使得每个所述子流程对应于沿着所述时间轴的多个时间段中的相应时间段；以及

根据在所述相应时间段期间所述一个或多个声源的运动和所述用户的运动，来调整所述子流程的每个。