[发明专利]识别花屏的方法、装置、设备及存储介质

说明书

本申请公开了一种识别花屏的方法、装置、设备及存储介质，属于互联网技术领域。该方法包括：接收视频发送端发送的视频流；接收视频发送端发送的视频流；将视频流的视频帧输入经过训练的花屏识别模型，以使花屏识别模型中顺序排列的多个特征提取模块对视频帧进行串行处理，得到多个特征提取模块分别输出的第一特征数据；基于多个特征提取模块分别输出的第一特征数据，确定目标融合特征数据；将目标融合特征数据输入花屏识别模型中的分类模块，得到视频帧是否存在花屏的识别结果；若识别结果为目标视频帧存在花屏，向视频发送端发送花屏通知。本申请可以通过花屏识别模型检测视频发送端发送的视频帧中是否存在花屏。

技术领域

本申请涉及互联网技术领域，特别涉及一种识别花屏的方法、装置、设备及存储介质。

背景技术

随着互联网技术的发展，视频实时传输功能越来越多的应用在人们的生活的当中，例如视频聊天、视频会议、视频直播等。

实现视频实时传输功能需要包括视频发送端、服务器和视频接收端。其中，视频发送端可以通过摄像装置拍摄视频，然后将拍摄的视频以数据流的形式发送至服务器，服务器在接收视频发送端发送的视频流之后，可以将视频流转发至对应的视频接收端，从而视频接收端可以对接收的视频流进行播放。

在实现本申请的过程中，发明人发现相关技术至少存在以下问题：

受视频发送端的性能以及所处网络环境等方面的影响，服务器接收到视频发送端发送的视频中可能存在花屏，即存在某些视频帧中会出现马赛克、画面显示不完整(如画面中的部分图像全为红色或绿色)等问题，这样也就影响的视频接收端的用户观看视频的体验。因此，需要一种可以检测视频帧中是否存在花屏的技术。

发明内容

本申请实施例提供了一种识别花屏的方法、装置、设备及存储介质，能够识别出存在视频流中存在花屏的视频帧。所述技术方案如下：

一方面，提供了一种识别花屏的方法，所述方法包括：

接收视频发送端发送的视频流；

将所述视频流的视频帧输入经过训练的花屏识别模型，以使所述花屏识别模型中顺序排列的多个特征提取模块对所述视频帧进行串行处理，得到所述多个特征提取模块分别输出的第一特征数据；

基于所述多个特征提取模块分别输出的第一特征数据，确定目标融合特征数据；

将所述目标融合特征数据输入所述花屏识别模型中的分类模块，得到所述视频帧是否存在花屏的识别结果；

若所述识别结果为所述目标视频帧存在花屏，向所述视频发送端发送花屏通知。

可选的，所述基于所述多个特征提取模块分别输出的第一特征数据，确定目标融合特征数据，包括：

将所述多个特征提取模块中预先指定的各目标特征提取模块输出的第一特征数据，输入所述花屏识别模型的融合模块进行融合处理，得到目标融合特征数据。

可选的，所述将所述多个特征提取模块中预先指定的各目标特征提取模块输出的第一特征数据，输入所述花屏识别模型的融合模块进行融合处理，得到目标融合特征数据，包括：

将所述预先指定的各目标特征提取模块输出的第一特征数据进行特征映射，得到多组维度相同的第二特征数据；

将所述多组维度相同的第二特征数据进行融合处理，得到目标融合特征数据。

可选的，所述预先指定的各目标特征提取模块包括：所述顺序排列的多个特征提取模块中排在最后一位的第一特征提取模块、排在倒数第二位的第二特征提取模块、以及排在倒数第三位的第三特征提取模块；

所述将所述多组维度相同的第二特征数据进行融合处理，得到目标融合特征数据，包括：