[发明专利]视频传输的用户体验质量测试

说明书

技术领域

本申请要求2011年10月14日提交的、题为“Multimedia QoE Video Lab”的、申请号为61/547,652的美国临时专利申请的优先权。申请号为61/547,652的申请作为参考被全部合并于此。

本申请要求2012年10月11日提交的、题为“Quality of User Experience Testing for Video Transmissions”的、申请号为13/649,818的美国实用新型专利申请的优先权。申请号为13/649,818的申请作为参考被全部合并于此。

背景技术

随着网络技术、手持装置和数据传输技术的发展，使用手持装置来享受消耗高宽带的媒体(诸如视频流)越来越多。现在用户在视频聊天、视频会议和在线游戏中，会对来自远程视频流服务器的视频进行回放。为了量化用户消费视频的用户体验质量(QoE)，国际电信联盟(ITU-T)在J.341标准中定义了用于确定平均意见分数(MOS)中“感性分析”建议。MOS表示用户对质量的感受，可以由一组用户主观确定或基于模型客观确定。模型可以反过来基于关于多个视频的多个主观评价。

附图说明

参考附图做了详细的描述。在附图中，附图标记的最左边的数字辨别该附图标记第一次出现的图。不同的图中使用相同的附图标记指示相似或相同的项或特征。

图1a示出了视频QoE测试系统，包括测试控制器装置、发送装置、至少一个网络模拟器、接收装置和相机，所述系统计算观看显示在所述接收装置上的传输的视频流的用户体验的QoE分数；

图1b示出了视频QoE测试系统，包括测试控制器装置、视频流服务器、至少一个网络模拟器、接收装置和相机，所述系统计算观看显示在接收装置上的传输的视频流的用户体验的QoE分数；

图2示出了能够用作测试控制器装置、发送装置、接收装置、相机、电信网络模拟器、互联网协议(IP)网络模拟器、视频中继服务器或视频流服务器的计算装置的组件级视图；以及

图3示出了用于对多个视频流传输以及在改变传输条件的情况下计算在用户的接收装置上进行视频流回放的用户体验的QoE分数的示例性过程。

具体实施方式

本说明书部分描述了计算接收装置上播放的视频流的用户体验质量(QoE)分数的技术。在计算QoE分数之前，诸如视频测试系统的测试控制器装置的装置，接收在接收装置播放视频流的同时捕捉的接收装置的显示屏幕的视频。装置还从至少一个参与向接收装置传输视频流的装置接收传输指标。然后装置至少部分基于参考视频、传输指标和一个或多个QoE模型来计算所述接收的视频的QoE。另外，在接收视频或传输指标之前，装置可以随着通过至少一个网络模拟器从发送装置到接收装置的视频流自动传输参考视频。所述自动可以包括向网络模拟器提供网络损伤设置。

然后装置用给定的一组网络损伤设置多次重复其操作，以及在其他时间用其他损伤设置多次重复其操作。通过在变化的情况下执行多次测试，视频测试系统将达到准确反应用户体验的QoE分数。

示例性测试系统

图1示出了视频QoE测试系统，该系统包括测试控制器装置、发送装置、至少一个网络模拟器、接收装置和相机，所述系统计算观看显示在所述接收装置上的传输的视频流的用户体验的QoE分数。如图所示，测试控制器装置102可以通过至少一个网络模拟器106从发送装置104自动传输视频流到接收装置108。在接收装置108播放视频流的同时，相机110捕捉接收装置108的显示屏幕的视频，并提供所述视频到测试控制器装置102。在一些实施方式中，测试控制器装置102可以指示发送装置104通过IP网络模拟器112在网络(诸如互联网)116上将视频流传输到视频中继服务器114上。为了自动化传输视频流和计算相机110捕捉的视频的QoE分数，测试控制器装置102可以配置有多个模块，诸如测试管理器模块118、损伤设置模块120、自动化模块122、传输指标模块124、QoE计算模块126和QoE报告模块128。