[发明专利]一种QoE驱动下的VR视频自适应采集与传输方法

说明书

本发明公开了一种QoE驱动下的VR视频自适应采集与传输方法，其步骤包括：1、VR视频采集系统中的每个摄像机都拍摄出相同码率等级的原始视频，每个原始视频都被压缩成不同的码率等级；2、服务器为每个原始视频选择一种码率等级进行传输并把所有传输后的原始视频合成一个完整的VR视频；3、服务器再把合成的VR视频进行分块处理，同时把每块视频压缩成不同的质量等级；4、服务器根据反馈信道中的用户实时视角信息、下行信道带宽信息为每个视频块选择一种质量等级和MCS方案，再把每个视频块传输到客户端。本发明能够更好地提高资源利用率，在带宽受限的条件下提高多用户的体验感QoE。

技术领域

本发明涉及多媒体视频传输领域，具体的说是一种针对VR视频的流媒体自适应采集与传输方法。

背景技术

重庆邮电大学的雒江涛等人发明了一种基于DASH的VR视频自适应传输方法(公开号：CN108235131A),其方法包括：建立三维VR视频与二维平面VR视频的映射关系模型，基于人体视觉和运动特性对VR视频进行区域优先级划分，服务器端将VR视频进行切片化，客户端带宽估计模块利用卡尔曼滤波算法进行预测可用带宽，客户端视频缓存模块基于缓存区状态对可用带宽进行平滑处理，客户端用户视窗感知模块基于运动惯性进行用户视窗预测，客户端决策模块综合考虑用户视窗、网络环境和缓存区状态自适应传输VR视频。但是此种方法并没有考虑到QoE在VR视频传输中的作用，缺少了传输过程中用户的体验质量(QoE)指标，并不能体现传输过程中用户的体验感变化情况。

北京理工大学的费泽松等人发明了一种基于VR终端反馈的自适应编码方法(公开号：CN107529064A)，其方法思想是：通过在传输机制上做出改进，即通过对VR视频分割成多个视角视频，各视角视频信息独立编码传输，再根据终端视角跟踪技术实时传输用户需要的视角视频信息，其他视角低码率传输，在终端将各视角视频拼接成VR视频，再通过终端打分反馈机制使用户得到合适的视角信息，用户的打分指令传输到服务器，服务器根据用户打分映射不同的码率反馈到终端。虽然此种方法考虑了终端视角对于VR视频传输时的反馈作用，但是它忽略了QoE在传输过程中的指导作用，不能提高传输过程中用户的体验感。

河海大学的徐媛媛等人发明了一种VR视频的多描述视频编码方法(公开号：CN107995493A)，其步骤如下：(1)按照接收端设备的视角大小，对VR视频划分为多个空域片段；(2)选择包含用户感兴趣区域的空域片段并对之进行编码，进行片交织，生成相应的两个描述,两个描述各自独立地在网络中传输；(3)在接收端，根据接收到单个描述或同时接收到两个描述的不同情况分别进行解码。此种方法虽然体现了用户感兴趣区域的优先传输，但是它只考虑了VR视频传输过程中的下行传输过程，没有考虑上行传输过程，这样单独优化会降低整个传输系统的整体性能。

湖北工业大学的熊炜等人发明了一种高分辨率VR视频直播拍照系统与方法(公开号：CN108769755A)，该系统包括图像采集模块、流媒体服务器模块和用户终端模块,图像采集模块包括图像采集设备和第一传输模块；流媒体服务器模块包括处理模块、存储模块和第二传输模块；处理模块包括实时拼接单元、视频编码单元和拍照处理单元；存储模块包括存储单元a、存储单元b和存储单元c；用户终端模块包括至少一个用户设备，每个用户设备包括显示模块、用户交互模块和第三传输模块。虽然此方法考虑了VR视频直播的上行传输和下行传输过程，但是它并没有考虑到QoE在VR视频系统中的重要性，并不能提高传输过程中的用户体验质量。

发明内容

本发明是为避免上述现有技术所存在的不足之处，提供一种QoE驱动下的VR视频自适应采集与传输方法，以期能够更好地提高资源利用率，以及在带宽受限条件下提高多用户的体验感QoE。

本发明为解决技术问题采用如下技术方案：