[发明专利]以计算机为中介的现实系统的混阶立体混响(MOA)音频数据

说明书

实例装置包含存储器装置，以及耦合到所述存储器装置的处理器。所述存储器被配置成存储声场的多个表示。所述处理器被配置成跟踪由与所述装置相关联的一或多个角度提供的导引角度，以及基于所述导引角度，从存储到所述存储器装置的所述多个表示中选择所述声场的表示。

本申请案主张2017年6月30日申请的美国临时申请案第62/527,769号的权益，所述申请案的全部内容在此以引用的方式并入本文中。

技术领域

本公开涉及例如音频数据等媒体数据的处理。

背景技术

高阶立体混响(HOA)信号(常常由多个球面谐波系数(SHC)或其它分层元素表示)是声场的三维表示。所述HOA或SHC表示可以与用以播放从SHC信号呈现的多通道音频信号的局部扬声器几何布置无关的方式来表示声场。SHC信号还可有助于向后兼容性，这是因为SHC信号可呈现为众所周知的且被高度采用的多通道格式(例如，5.1音频通道格式或7.1音频通道格式)。因此，SHC表示可实现也适应向后兼容性的对声场的更好表示。

发明内容

本公开大体上涉及以计算机为中介的现实系统的用户体验的听觉方面，所述以计算机为中介的现实系统包含虚拟现实(VR)、混合现实(MR)、扩增现实(AR)、计算机视觉和图形系统。在一些特定实例中，本公开的各方面是针对伴随以计算机为中介的现实系统的以计算机为中介的感测输入数据的对应视频内容的音频内容的选择、流式传输和重放。

在一个实例中，一种装置包含被配置成存储声场的多个表示的存储器装置。在此实例中，所述装置还包含耦合到所述存储器装置的处理器。所述处理器被配置成跟踪由与所述装置相关联的一或多个角度提供的导引角度，以及基于所述导引角度，从存储到所述存储器装置的所述多个表示中选择所述声场的表示。

在另一实例中，一种方法包含通过处理器跟踪由与装置相关联的一或多个角度提供的导引角度。所述方法另外包含通过所述处理器并且基于所述导引角度，从存储到与所述处理器耦合的存储器装置的声场的多个表示中选择声场的表示。

在另一实例中，一种设备包含用于存储声场的多个表示的装置；用于跟踪由与所述设备相关联的一或多个角度提供的导引角度的装置；和用于基于所述导引角度，从所述所存储的多个表示中选择所述声场的表示的装置。

在另一实例中，使用指令编码非暂时性计算机可读存储媒体，所述指令在被执行时致使装置的处理器跟踪由与所述装置相关联的一或多个角度提供的导引角度；和基于所述导引角度，从存储到所述非暂时性计算机可读存储媒体的声场的多个表示中选择声场的表示。

在附图和以下描述中阐明本发明的一或多个实例的细节。其它特征、目标和优势将从所述描述和图式以及从权利要求书中显而易见。

附图说明

图1是说明具有各种阶数和子阶数的球面谐波基底函数的图式。

图2是说明可执行本公开中描述的技术的各个方面的系统的图式。

图3是说明声场的混阶立体混响表示的不均匀空间分辨率分布的方面的图式。

图4A是说明声场的全三阶HOA表示与相同声场的混阶立体混响表示之间的差异的图式，在所述混阶立体混响表示中，水平区与其余的区相比具有较高空间分辨率。

图4B是说明可如何根据声场的基于对象的表示在多通道音频数据的前景和背景中呈现各个音频对象的图式。

图5是说明相同声场的各个混阶立体混响表示的空间分辨率与对应VR导引角度之间的关系的图式，内容消费者装置14可将每一MOA表示与所述对应VR导引角度相关联。

图6A和6B说明本公开的内容消费者装置可基于头戴装置的导引角度选择的相同声场的不同混阶立体混响表示。