[发明专利]沉浸式音频通信

说明书

本申请是申请号为200680027097.9(PCT/AU2006/000881)、申请日为2006年6月23日、发明名称为“沉浸式音频通信”的发明专利申请的分案申请。

技术领域

本发明总体上涉及沉浸式音频通信(immersive audio communication)领域，并且具体地但决不排他地适用于与虚拟环境的化身(avatar)相关联的沉浸式音频场景。

背景技术

传统地，分布式虚拟环境(如多人在线游戏)使用基本的装置以使得用户能够相互通信。例如，一些分布式虚拟环境已经采用了基于文本的通信，而其他的虚拟环境已经支持在因特网协议技术上的简单的单声道语音。

已经提出，可以通过在虚拟环境中增加介质或高质量音频通信来改进用户对虚拟环境的感知。因此，已经进行了相当多的研究来为分布式虚拟环境提供实时沉浸式音频通信。大多数研究集中在为用户提供表达方向感和距离感的空间音频；即，音频信息听起来好像是从特定位置发出并且已经传播了一定距离。

为分布式虚拟环境提供沉浸式音频通信的研究通常假设虚拟环境的用户使用计算设备(如，台式计算机)，该计算设备具有合理量的处理能力，并且经由相对高带宽的数据链路连接到虚拟环境。这样，当前的沉浸式音频通信技术通常涉及跨越一个或更多中心服务器和用户的计算设备而进行分布式沉浸式音频场景计算。

便携式无线计算设备的最近进展(如诺基亚N-Gage和PlayStationPortable)意味着数量日益增长的用户将潜在地期望经由便携式无线计算设备访问虚拟环境。与台式计算设备相比，便携式无线计算设备具有有限处理能力，并且将经由合理低带宽的无线链路连接到虚拟环境。不幸的是，因为无线计算设备可能没有足够的处理能力来参与到分布式音频场景计算中，所以当今的沉浸式音频通信技术可能无法有效支持便携式无线计算设备(或其他具有相对低计算能力的计算设备)。其结果是，大部分计算密集的音频场景处理将被推回到虚拟环境服务器上。这基本意味着如果要支持便携式无线计算设备并为其提供沉浸式音频通信，可能需要采用更强大的服务器。

发明内容

根据本发明的第一方面，提供了一种将音频用于虚拟环境的方法，该方法包括以下步骤：

识别与所述虚拟环境相关联的第一化身；

对于为与所述虚拟环境相关联的第二化身创建的音频信息，确定是否满足音频重用准则；以及

在确定满足所述音频重用准则时，对所述第一化身重用所述音频信息。

该方法的优点在于，与现有的沉浸式音频技术不同，其能够有利于便携式无线通信设备(或具有相对低处理能力的任何其他设备)进行沉浸式音频通信。该优点源自所述方法涉及尽可能(即，当满足音频重用准则时)重用音频信息这一事实，这可以减少创建沉浸式音频的处理密集型任务。借助于示例实现，该方法可以由一个或更多个中央音频场景创建服务器来执行，以降低(多个)中央服务器的音频场景处理要求。与本发明相反，现有的沉浸式音频通信技术不采用音频信息重用，并且将因此而比采用本发明的系统需要更多处理资源。

该方法优选地还包括以下步骤：基于所述第一化身和与虚拟环境相关联的第三化身之间的距离处理所述音频信息。

执行处理音频的步骤的优点在于，其可以被用来将对距离的感知添加到重用的音频信息中。例如，该处理步骤可以涉及将所述音频信息衰减以表示该音频信息已经传播了一定距离。

该方法优选地还包括以下步骤：在确定不满足所述音频重用准则时，为所述第一化身创建替代音频信息。

创建替代音频信息的优点在于，在不满足重用准则的情况下提供了获得用于所述第一化身的音频的机制。

确定是否满足音频重用准则的步骤优选地包括以下步骤：确定所述第一化身是否会将所述音频信息感知成是从所述虚拟环境中所述第三化身所在的预定区域发出的。

确定第一化身是否会将所述音频信息感知成是从所述预定区域发出的优点在于，其提供了用于确保重用的音频信息具有合理地靠近精确创建的音频信息的空间方面的空间特性的技术，该精确创建的音频信息可以在创建替代音频信息的前述步骤期间创建。

所述音频信息优选地包括空间音频信息。

根据本发明的第二方面，提供了一种将音频用于虚拟环境的系统，该系统包括一处理装置，该处理装置被设置为执行以下步骤：

识别与所述虚拟环境相关联的第一化身；

对于为与所述虚拟环境相关联的第二化身创建的音频信息，确定是否满足音频重用准则；以及

在确定满足所述音频重用准则时，对所述第一化身重用所述音频信息。