[发明专利]数据流处理方法、装置及存储介质、终端设备

权利要求书

1.一种多人连麦的数据流处理方法，其特征在于，所述方法包括：

确认当前用户接入连麦会话窗口；

获取所述连麦会话窗口的连麦用户的人数；

若所述连麦用户的人数达到预设人数，获取所述连麦用户的连续的帧图像，对所述帧图像进行帧差运算，得到帧差结果值；

根据所述帧差结果值控制连麦会话的数据流，包括：

若获取的连麦用户的连续帧图像为所述当前用户的连续帧图像，则根据帧差结果值控制所述当前用户的数据流，其中，当所述帧差结果值大于第一阈值时，推送所述当前用户的视频流和音频流，当所述帧差结果值小于或等于第一阈值时，推送所述当前用户的音频流；

若获取的连麦用户的连续帧图像为所述当前用户以外的任一连麦用户的连续帧图像，则根据帧差结果值控制该任一连麦用户的数据流，其中，当所述帧差结果值大于第二阈值时，根据标志位拉取所述当前用户以外的任一连麦用户的视频流和音频流，当所述帧差结果值小于或等于第二阈值时，根据所述标志位拉取所述当前用户以外的任一连麦用户的音频流。

2.根据权利要求1所述的方法，其特征在于，所述获取所述连麦会话窗口的连麦用户的人数之后，还包括：

若所述连麦用户的人数未达到所述预设人数，通过动态码率的方式调整所述连麦会话的数据流。

3.根据权利要求1所述的方法，其特征在于，所述根据所述帧差结果值控制连麦会话的数据流，还包括：

获取所述当前用户以外的任一连麦用户推流时的标志位；所述推流时的标志位为连麦用户推送所述数据流时，标志连麦用户在所述连麦会话窗口的显示位置的标号。

4.根据权利要求1所述的方法，其特征在于，所述获取所述连麦用户的连续的帧图像，对所述帧图像进行帧差运算，得到帧差结果值，根据所述帧差结果值控制连麦会话的数据流，包括：

将所述帧图像划分为上部分图像、中部分图像以及下部分图像；

分别对所述上部分图像、中部分图像以及下部分图像进行帧差运算，得到每个部分的帧差结果值；

根据所述每个部分的帧差结果值控制连麦会话的数据流。

5.根据权利要求4所述的方法，其特征在于，所述获取所述连麦用户的连续的帧图像，包括：获取所述连麦用户的连续的三个帧图像，得到根据时间前后顺序排列的第一帧图像、第二帧图像以及第三帧图像；

所述分别对所述上部分图像、中部分图像以及下部分图像进行帧差运算，得到每个部分的帧差结果值，根据所述每个部分的帧差结果值控制连麦会话的数据流，包括：

利用差分法分别对所述第二帧图像与所述第一帧图像的所述上部分图像、中部分图像以及下部分图像进行帧差运算，依序得到第一差值，第二差值以及第三差值；

利用差分法，分别对所述第三帧图像与所述第二帧图像的所述上部分图像、中部分图像以及下部分图像进行帧差运算，依序得到第四差值，第五差值以及第六差值；

对所述第一差值和所述第四差值进行与运算，得到第一运算值；对所述第二差值和所述第五差值进行与运算，得到第二运算值；对所述第三差值和所述第六差值进行与运算，得到第三运算值；

根据所述第一运算值、所述第二运算值以及所述第三运算值，控制连麦会话的数据流。

6.根据权利要求5所述的方法，其特征在于，所述数据流包括视频流和音频流；所述根据所述第一运算值、所述第二运算值以及所述第三运算值，控制连麦会话的数据流，包括：

分别判断所述第一运算值、所述第二运算值和所述第三运算值是否大于第三阈值；

若所述第一运算值、所述第二运算值和所述第三运算值中，任一运算值大于所述第三阈值，则推送所述当前用户的视频流和音频流，或拉取所述当前用户以外的任一连麦用户的视频流和音频流；

若所述第一运算值、所述第二运算值和所述第三运算值中，三个运算值均小于或等于所述第三阈值，则推送所述当前用户的音频流，或拉取所述当前用户以外的任一连麦用户的音频流。