[发明专利]用于可伸缩媒体的封装的方法和装置

说明书

技术领域

本发明总体上涉及实时多媒体数据领域，并且更具体而言涉及提高面向分组的网络中的多媒体数据的质量。

背景技术

这个部分旨在提供记载在权利要求中的发明的背景或者上下文。这里的描述可以包括可能实行的概念，而不一定是那些先前已经构思或者实行的概念。因此，除非这里另有指示，否则这个部分中描述的内容并不是本申请中的描述和权利要求的现有技术，并且将该内容包括在这部分中并不意味着承认其是现有技术。

在面向分组的网络中，存在至少两种主要的擦除错误来源。首先，传输解码器或者接收器可能由于数据分组中的一个或者多个比特错误而丢弃该整个数据分组。其次，在拥堵的网络元件(诸如路由器)中的队列溢出通常造成分组丢失。

在一个或者多个网络元件中的拥堵可以由发送设备基于来自接收设备的接收器反馈而检测到。实时传输控制协议(RTCP)接收器报告和RTCP扩展报告(也被称为具有客户端缓冲器反馈的RTCP应用(RTCP APP)分组)和下一应用数据单元应用分组(NADU APP)都是接收器反馈的示例。在检测到拥堵时，发送设备通常降低数据传输速率以避免过度的网络拥堵和不公平的网络资源分配。在发送器实时地对视频进行编码并且仅存在一个接收器时，编码器的比特率控制算法可以用于数据速率调节。另外，可以使用操纵经编码的比特流的方法，诸如流稀释和切换。

在许多实时应用(例如，音频和/或视频数据流式传输)中，在解码媒体质量和网络资源之间存在折中。在获得良好的解码媒体质量的因素中包括足够的数据传输速率，例如，足够高的比特率以获得高的峰值信噪比(PSNR)。然而，在通信网络中，数据传输速率受到可用带宽和/或诸如网络拥堵之类的其他因素的限制。网络拥堵导致数据分组的丢失，这通常导致解码媒体数据质量变差。本发明的实施方式针对用于向可伸缩媒体附加质量增强数据的方法和装置，以供在不增加分组交换网络中的分组丢失的量的情况下进行传输。

发明内容

在本发明的一个方面中，一种方法，包括：通过封装与媒体数据相关联的至少一个数据单元来形成分组净荷；确定分组净荷的大小是否小于预定阈值；以及如果分组净荷的大小小于预定阈值，则向分组净荷附加增强数据单元。

在一种实施方式中，该方法进一步包括：重复对分组净荷的大小是否小于预定阈值的确定，并且如果分组净荷的大小小于预定阈值，则向分组净荷附加增强数据单元，直到所产生的分组净荷的大小等于或者大于预定阈值为止。

在一种实施方式中，形成分组净荷包括将基于基本质量表示的至少一个应用数据单元的第一元素封装到分组净荷中。

在一种实施方式中，附加增强数据单元进一步包括：选择要向分组净荷附加的增强数据单元。选择可以包括：基于增强质量表示的至少一个应用数据单元来选择要封装到分组净荷中的增强数据单元，从而使得分组净荷的大小小于预定阈值。

在一种实施方式中，媒体数据包括第一存取单元和第二存取单元，第一存取单元包括第一基本质量表示和第一增强质量表示，第二存取单元包括第二基本质量表示和第二增强质量表示。至少一个数据单元可以是第一基本质量表示和第二基本质量表示中的一个的至少一个应用数据单元，增强数据单元可以是第一增强质量表示和第二增强质量表示的至少一个应用数据单元。分组净荷可以响应于所估计的网络吞吐量大于用于发射第一基本质量表示和第二基本质量表示所需的数据速率而发射。

在一种实施方式中，封装的至少一个数据单元包括基于基本质量表示的至少一个应用数据单元的前向纠错修复数据。

在一种实施方式中，该方法进一步包括通过网络发射分组净荷。发射步骤可以包括估计网络吞吐量。估计可以包括获取传输错误率；以及如果传输错误率低于错误率阈值，则发射分组。

在一种实施方式中，至少一个数据单元和增强数据单元的封装由指令表示。指令可以存储在文件中。指令可以是根据国际标准组织(ISO)基本媒体文件格式而形成的提示样本的构造器。

在本发明的另一方面中，一种装置包括：存储器单元和可通信地连接到存储器单元的处理器。处理器被配置为：通过封装与媒体数据相关联的至少一个数据单元来形成分组净荷；确定分组净荷的大小是否小于预定阈值；以及如果分组净荷的大小小于预定阈值，则向分组净荷附加增强数据单元。