[发明专利]视频混流方法、视频混流装置及存储介质

权利要求书

1.一种视频混流方法，其特征在于，包括：

从第一视频终端获取多个第一视频画面帧，从第二视频终端获取多个第二视频画面帧；其中每个所述第一视频画面帧具有对应的第一画面帧时间戳，每个所述第二视频画面帧具有对应的第二画面帧时间戳；

根据预设的对齐时间长度，设定多个画面帧对齐时间戳区间；

根据所述第一画面帧时间戳，确定所述第一视频画面帧的画面帧对齐时间戳区间；根据所述第二画面帧时间戳，确定所述第二视频画面帧的画面帧对齐时间戳区间；

对每个画面帧对齐时间戳区间内的所述第一视频画面帧和所述第二视频画面帧进行画面帧对齐操作；以及

对所述对齐操作后的第一视频画面帧以及第二视频画面帧进行视频混流操作；

其中如最近的第一视频画面帧对应的画面帧对齐时间戳区间与最近的第二视频画面帧对应的画面帧对齐时间戳区间的间隔大于设定区间数量，则将所述最近的第二视频画面帧作为第二对齐画面帧，并在所述最近的第二视频画面帧之后设置至少一个所述第二对齐画面帧，作为第二视频画面帧；

如最近的第二视频画面帧对应的画面帧对齐时间戳区间与最近的第一视频画面帧对应的画面帧对齐时间戳区间的间隔大于设定区间数量，则将所述最近的第一视频画面帧作为第一对齐画面帧，并在所述最近的第一视频画面帧之后设置至少一个所述的第一对齐画面帧，作为第一视频画面帧。

2.根据权利要求1所述的视频混流方法，其特征在于，所述根据预设的对齐时间长度，设定多个画面帧对齐时间戳区间的步骤为：

根据预设的对齐时间长度，设定连续的多个画面帧对齐时间戳区间；每个所述画面帧对齐时间戳区间的区间长度等于所述对齐时间长度。

3.根据权利要求1所述的视频混流方法，其特征在于，所述对每个画面帧对齐时间戳区间内的所述第一视频画面帧和所述第二视频画面帧进行画面帧对齐操作的步骤包括：

获取同一画面帧对齐时间戳区间内的所述第一视频画面帧的第一画面帧数量和所述第二视频画面帧的第二画面帧数量；

获取所述第一画面帧数量与所述第二画面帧数量的大小关系；

如所述第一画面帧数量大于所述第二画面帧数量，则将所述画面帧对齐时间戳区间内的第二视频画面帧的最后一帧，作为第二对齐画面帧；并在所述画面帧对齐时间戳区间内的第二视频画面帧的最后一帧后设置至少一个所述第二对齐画面帧，作为第二视频画面帧，以使得所述第一画面帧数量等于所述第二画面帧数量，并返回获取所述第一画面帧数量与所述第二画面帧数量的大小关系的步骤；

如所述第一画面帧数量小于所述第二画面帧数量，则将所述画面帧对齐时间戳区间内的第一视频画面帧的最后一帧，作为第一对齐画面帧；并在所述画面帧对齐时间戳区间内的第一视频画面帧的最后一帧后设置至少一个所述第一对齐画面帧，作为第一视频画面帧，以使得所述第一画面帧数量等于所述第二画面帧数量，并返回获取所述第一画面帧数量与所述第二画面帧数量的大小关系的步骤；

如所述第一画面帧数量等于所述第二画面帧的数量，则对所述第一视频画面帧和所述第二视频画面帧进行画面帧对齐操作。

4.根据权利要求3所述的视频混流方法，其特征在于，所述获取同一画面帧对齐时间戳区间内的所述第一视频画面帧的第一画面帧数量和所述第二视频画面帧的第二画面帧数量的步骤包括：

如当前画面帧对齐时间戳区间之后的画面帧对齐时间戳区间内具有第一视频画面帧和第二视频画面帧，且当前画面帧对齐时间戳区间中同时具有第一视频画面帧和第二视频画面帧；则获取当前画面帧对齐时间戳区间内的所述第一视频画面帧的第一画面帧数量和所述第二视频画面帧的第二画面帧数量。