[发明专利]一种音视频直播中检测客户端播放状态的系统及方法

权利要求书

1.一种音视频直播中检测客户端播放状态的系统，其特征在于，包括：采集端、服务器和客户端，其中，采集端与服务器连接，服务器与客户端连接；

采集端定时在采集的音视频数据中加入状态检测信息的标记，并将加入了状态检测信息标记的音视频数据上传到服务器；其中，以时间标记作为所述状态检测信息的标记；

服务器检测接收到的音视频数据，如果检测到状态检测信息的标记，则将此时的图像进行解码，将解码后的图像转换为解码图像的RGB数据，关联地保存状态检测信息的标记和解码图像的RGB数据以及客户端的身份标识信息；

客户端从服务器获取音视频数据并播放；客户端在播放音视频数据时，如果检测到状态检测信息的标记，则实时记录该状态检测信息的标记，同时进行播放区域截图，并将截图数据和状态检测信息的标记数据连同客户端的身份标识信息一起实时发送到服务器；

服务器对在限定时间内接收到的客户端发送的截图数据进行RGB转换，转换为发送的截图的RGB数据，比较对应于同一状态检测信息的标记的解码图像的RGB数据与发送的截图的RGB数据是否一致，如果不一致或在限定时间内服务器没有接收到客户端发送的截图数据和状态检测信息的标记数据，则判定客户端播放状态异常；

所述系统能够同时对多个客户端进行播放状态检测。

2.根据权利要求1所述的系统，其特征在于，所述身份标识信息为ip地址或MAC地址。

3.根据权利要求2所述的系统，其特征在于，加入状态检测信息的标记的帧为关键帧。

4.根据权利要求1所述的系统，其特征在于，状态检测信息的标记为时间戳和/或弹幕。

5.根据权利要求1至4中任一项所述的系统，其特征在于，在判定客户端播放状态异常时，服务器向发起音视频直播的用户反馈该客户端播放状态异常，或向服务器管理员反馈播放状态异常的客户端的身份标识信息。

6.一种音视频直播中检测客户端播放状态的方法，其特征在于，该方法包括：

采集步骤：采集端采集音视频数据；

加标记步骤：采集端定时在采集到的音视频数据中加入状态检测信息的标记；其中，以时间标记作为所述状态检测信息的标记；

上传步骤：经过加标记步骤后，采集端将加入了状态检测信息的标记的音视频数据上传到服务器；

第一检测步骤：服务器检测接收到的音视频数据，如果服务器检测到状态检测信息的标记，则将此时的图像进行解码，将解码后的图像转换为解码图像的RGB数据，关联地保存状态检测信息的标记和解码图像的RGB数据以及客户端的身份标识信息；

第二检测步骤：客户端从服务器获取音视频数据，客户端在播放音视频数据时，如果检测到状态检测信息的标记，则实时记录该状态检测信息的标记，同时进行播放区域截图，并将截图数据和状态检测信息的标记数据连同客户端的身份标识信息一起实时发送到服务器；

判断步骤：服务器接收客户端发送的截图数据和状态检测信息的标记数据，并对在限定时间内接收到的客户端发送的截图数据进行RGB转换，转换为发送的截图的RGB数据，比较对应于同一状态检测信息的标记的解码图像的RGB数据与发送的截图的RGB数据是否一致，如果不一致或在限定时间内服务器没有接收到客户端发送的截图数据和状态检测信息的标记数据，则判定客户端播放状态异常；

所述方法能够同时对多个客户端进行播放状态检测。

7.根据权利要求6所述的方法，其特征在于，所述身份标识信息为ip地址或MAC地址。

8.根据权利要求7所述的方法，其特征在于，加入状态检测信息的标记的帧为关键帧。

9.根据权利要求6所述的方法，其特征在于，状态检测信息的标记为时间戳和/或弹幕。

10.根据权利要求6至9中任一项所述的方法，其特征在于，在判断步骤中，当判定客户端播放状态异常时，服务器向发起音视频直播的用户反馈该客户端播放状态异常，或向服务器管理员反馈播放状态异常的客户端的身份标识信息。