[发明专利]连麦视频显示方法及其装置、设备、介质

权利要求书

1.一种连麦视频显示方法，其特征在于，包括如下步骤：

获取网络直播过程中经内容分发网络转发的混画视频流，所述混画视频流包含有两个以上的连麦的主播用户的视频图像；

响应观众用户的视频布局切换指令，确定所述视频布局切换指令所限定的各个主播用户所属的目标播放窗口，部分目标播放窗口之间具有层叠关系；

识别提取出各个主播用户的视频图像在所述混画视频流的全画幅中所占的视频画幅，根据各个所述视频画幅提取出所述各个主播用户的视频图像；

将所述各个主播用户的所述视频图像分别绘制显示到所述各个主播用户相应的目标播放窗口。

2.根据权利要求1所述的连麦视频显示方法，其特征在于，识别提取出各个主播用户的视频图像在所述混画视频流的全画幅中所占的视频画幅，包括：

提取所述混画视频流中的至少两个相邻图像帧；

计算所述至少两个相邻图像帧之间的帧差信息，根据帧差信息确定出各个主播用户的视频图像之间的分界线信息；

根据所述分界线信息和所述混画视频流的全画幅，确定出所述各个主播用户的视频图像所占的视频画幅。

3.根据权利要求2所述的连麦视频显示方法，其特征在于，计算所述至少两个相邻图像帧之间的帧差信息，根据帧差信息确定出各个主播用户的视频图像之间的分界线信息，包括：

基于每一对相邻图像帧之间的帧差信息寻找所述混画视频流中同排的全部像素点的像素差值总和最小的两排像素；

判断所述两排像素是否在位置上相继，当两排像素相继时，使用该两排像素所在的位置确定出分界线信息；

当未确定出所述分界线信息时，采用下一对相邻图像帧之间的帧差信息迭代确定所述分界线信息。

4.根据权利要求3所述的连麦视频显示方法，其特征在于，当两排像素相继时，使用该两排像素所在的位置确定出分界线信息，包括：

当两排像素相继时，将当次判断的两排像素的位置与上一轮判断出的两排像素的位置相比较，当所述位置不变时，使用该两排像素所在的位置确定出分界线信息，否则，继续采用下一对相邻图像帧之间的帧差信息迭代确定所述分界线信息。

5.根据权利要求1所述的连麦视频显示方法，其特征在于，识别提取出各个主播用户的视频图像在所述混画视频流的全画幅中所占的视频画幅，包括：

从所述混画视频流的补充增强信息中提取出画幅比例信息，所述画幅比例信息包含所述各个主播用户的视频图像在所述混画视频流中的占比；

基于所述混画视频流的全画幅，根据所述画幅比例信息计算确定所述各个主播用户的视频图像所占的视频画幅。

6.根据权利要求1至5中任意一项所述的连麦视频显示方法，其特征在于，将所述各个主播用户的所述视频图像分别绘制显示到所述各个主播用户相应的目标播放窗口，包括：

计算出各个主播用户的所述视频图像对应其相应的目标播放窗口的显示分辨率；

判断每个所述视频图像的显示分辨率是否低于第一分辨率阈值而高于第二分辨率阈值，当判断成立时，采用插值方式对相应的所述视频图像进行像素插值以实现画质增强；

判断每个所述视频图像的显示分辨率是否低于第二分辨率阈值，当低于第二分辨率阈值时，采用预设的超分辨率增强模型对相应的所述视频图像进行画质增强；

将画质增强后的所述视频图像绘制显示到其相应的目标播放窗口。

7.根据权利要求1至5中任意一项所述的连麦视频显示方法，其特征在于，将所述各个主播用户的所述视频图像分别绘制显示到所述各个主播用户相应的目标播放窗口之后，包括：

获取所述混画视频流中的图像帧；

采用预设的图像分割模型分割出所述图像帧的特效图像；

采用预设的特效分类模型确定出所述特效图像所属的特效类型；

执行所述特效类型相对应的本地特效播放指令，在当前图形用户界面中同步于所述图像帧播放相应的动画特效，且将所述动画特效中的图像覆盖显示面积最大的目标播放窗口中出现的所述特效图像。