[发明专利]多个媒体流的显示布局优化

说明书

提供了一种用于优化阱设备处的多个视频流的显示布局的系统和方法。可以基于多个不同变量来动态地优化多个流的显示布局，所述变量包括阱设备的特性、活动传入流的总数、活动音频、以及源材料或设备的其他特性。传入媒体流的源可以包含用于优化多个媒体流的显示布局的有用的特性。源设备的一个此类特性可以包括设备类型，诸如膝上型计算机、PC、电话、或平板电脑。可以从每一个传入流中提取信息，以便预测传入媒体流所源自的源设备类型。

相关申请的交叉引用

本申请要求于2020年11月1日提交的美国临时专利申请号63/108,485的权益，该临时申请通过引用整体并入本文。

技术领域

本公开涉及优化用于输出到阱设备(sink device)的多个传入媒体流的显示布局，并且更具体地，部分地基于接收到传入媒体流所来自的源设备类型的预测，动态地优化显示布局。

背景技术

当组合多个视频流时(诸如在电话会议应用中)，常规的视频流控制算法利用几种方式来确定视频流的大小和放置。这些方式包括以相等的大小显示所有流、强调主动说话者(即，将一个流显示得比其他流大)、画中画和成帧(即，在中间的大流周围显示成正方形的小流)。结果往往是屏幕实际使用面积(screen real estate)利用不佳且文字难以辨认。另外，各种操作系统上的本机流协议(native streaming protocol)不共享指定操作系统运行的设备类型的元数据(例如，膝上型计算机、PC、电话、平板电脑等)。因此，流接收器通常缺乏设备的输出上正在被查看的内容的上下文，这进而也会导致浪费屏幕空间和最终用户或观看者的次优输出呈现。

发明内容

根据一些实施例，公开了一种媒体接收器，其中该媒体接收器包括存储器，该存储器被配置为存储机器可读指令；以及处理器电路系统，该处理器电路系统与该存储器通信。该处理器电路系统被配置为执行该机器可读指令，使得该处理器电路系统：接收与第一媒体源相对应的第一媒体流，从该第一媒体流获取第一元数据，接收与第二媒体源相对应的第二媒体流，从该第二媒体流获取第二元数据，基于该第一元数据来确定该第一媒体源的第一源类型，基于该第二元数据来确定该第二媒体源的第二源类型，至少基于该第一源类型和该第二源类型来生成包括该第一媒体流和该第二媒体流的优化显示，以及控制该优化显示到阱设备的传送。

根据一些实施例，一种用于优化显示屏幕上的显示布局的方法，该方法包括：通过通信接口，从第一媒体源接收第一媒体流；通过处理器，从该第一媒体流提取第一元数据；通过该通信接口，从第二媒体源接收第二媒体流；通过该处理器，从该第二媒体流提取第二元数据；通过该处理器，基于该第一元数据来确定该第一媒体源的第一源类型；通过该处理器，基于该第二元数据来确定该第二媒体源的第二源类型；通过该处理器，至少基于该第一源类型和该第二源类型来生成包括该第一媒体流和该第二媒体流的优化显示；以及通过该处理器，控制该优化显示到阱设备的传送。

附图说明

图1示出了根据本公开的一个或多个实施例的包括流媒体接收器的媒体呈现系统的环境图。

图2示出了来自图1的系统的框图，包括流媒体接收器的更详细的视图。

图3示出了根据本公开的一个或多个实施例的描绘了用于优化多个媒体流的显示布局的过程的示例性流程图。

图4示出了根据本公开的一个或多个实施例的描绘了用于优化显示布局的信号、数据和/或相对应的信息的流的示例性流程图。

图5示出了根据本公开的一个或多个实施例的描绘了用于基于对输入媒体流的分析来预测源设备类型的过程的示例性流程图。

图6示出了根据本公开的一个或多个实施例的图示了用于基于输入媒体流的一个或多个特性来预测源设备类型的第一示例性实施例的流程图。

图7示出了根据本公开的一个或多个实施例的图示了用于基于输入媒体流的一个或多个特性来预测源设备类型的第二示例性实施例的流程图。