[发明专利]用于混合式拓扑媒体会议系统的方法和系统

说明书

技术领域

本发明涉及会议系统。

背景技术

随着每日应用和服务以惊人的速度迁移到互联网协议（IP）网络，并且随着各种各样的多媒体会议设备的增长，越来越多的人使用多媒体会议作为其通信工具。现在，多媒体会议通信可以使用多个会议技术来承载。下面是会议技术的几个示例：AVC多媒体会议方法和媒体中继会议方法。AVC表示高级视频编码。在该公开中，术语：多媒体会议、视频会议（具有或者没有内容）和音频会议可以互换地使用，并且术语视频会议可以被用作它们的代表性术语。

通常，三个或更多参与者之间的AVC多点会议要求AVC多点控制单元（MCU）。AVC MCU是典型地位于网络的节点中或者位于从多个端点接收若干信道的终端中的会议控制实体。根据某些准则，AVC MCU处理音频和视频信号并且经由所连接的信道的集合而将它们分布给每一个参与端点。AVC MCU的示例包括RMX® 2000，其从Polycom公司可获得（RMX是Polycom公司的注册商标）。可以被称为AVC端点（AVCEP）的AVC通信方法中的终端是网络上能够提供与另一个AVCEP或者与MCU的实时、双向音频和/或视听通信的实体。AVCEP和MCU的更全面的定义可以在国际电信联盟（“ITU”）标准中找到，诸如但不限于H.320、H.324和H.323标准，其可以在ITU网站：www.itu.int上找到。

还被称为AVC MCU的常用MCU可以包括多个音频和视频解码器、编码器和媒体组合器（音频混合器和/或视频图像构建器）。MCU可以使用大量处理能力以处置可变数目的参与者（AVCEP）之间的音频和视频通信。通信可以是基于各种通信协议和压缩标准，并且可以涉及不同类型的AVCEP。MCU可能需要将多个输入音频或视频流分别组合成至少一个单个音频或视频输出流，其与将输出流所发送到的至少一个出席者的AVCEP的性质兼容。从端点接收的经压缩的音频流被解码并且可以被分析以确定将选择哪些音频流以用于混合成会议的单个音频流。在本公开中，可以互换地使用术语解码和解压缩。

会议可以具有一个或多个视频输出流，其中每一个输出流与布局相关联。布局限定接收流的一个或多个出席者的显示器上的会议的外观。布局可以划分成一个或多个片段，其中每一个片段可以与某一出席者经由他/她的AVCEP所发送的视频输入流相关联。每一个输出流可以从若干输入流构造，从而导致连续存在（CP）图像。在CP会议中，远程终端处的用户可以同时地观察会议中的若干其他参与者。每一个参与者可以显示在布局的片段中，其中每一个片段可以为相同尺寸或不同尺寸。与布局的片段相关联并且显示的参与者的选择可以在参与到相同会话中的不同出席者之中变化。

第二种类型的通信方法是媒体中继会议（MRC）。在MRC中，媒体中继MCU（MRM）从每一个参与的媒体中继端点（MRE）接收一个或多个流。MRM向每一个参与端点中继从会议中的其它端点所接收的多个媒体流的集合。每一个接收端点使用多个流以根据布局而生成视频CP图像以及会议的混合音频。将CP视频图像和混合音频播放给MRE的用户。MRE可以是具有以下能力的会话中的出席者的终端：从MRM接收所中继的媒体并且根据来自MRM的指令递送经压缩的媒体。邀请想要就MRC、MRM或MRE的示例了解得更多的读者阅读美国专利No. 8,228,363，其通过引用并入本文。在下文中，术语端点也可以表示MRE。

在一些MRC系统中，传送MRE在两个或更多流中发送其视频图像；每一个流可以与不同的质量等级相关联。质量可以在帧速率、分辨率和/或信噪比（SNR）等方面不同。以类似方式，每一个传送MRE可以在两个或更多流中发送其音频，这两个或更多流可以通过例如压缩比特率而彼此不同。这样的系统可以使用多个流来提供布局中的不同片段尺寸、由每一个接收端点使用的不同分辨率等。另外，多个流可以用于克服分组丢失。

现在，MRC变得越来越流行。许多视频会议系统在一个或多个流内并行地递送多个质量等级。对于视频，例如质量可以以数个域表述，诸如时间域（例如，每秒帧）、空间域（例如，HD对比CIF）和/或质量（例如，锐度）。例如可以用于多质量流的视频压缩标准为H.264 AVC、H.264附录G（SVC）、MPEG-4等。关于诸如H.264之类的压缩标准的更多信息可以在ITU网站www.itu.int或者在www.mpeg.org处找到。