[发明专利]一种媒体流信息的处理方法及终端、计算机存储介质

说明书

本发明公开了一种媒体流信息的处理方法、终端及计算机存储介质，其中，所述方法包括：对第一媒体数据流按照媒体帧类型进行分离，得到至少一个视频帧和至少一个音频帧。将至少一个视频帧发送到第一抖动缓冲区(Jitterbuffer)和第二Jitterbuffer，由第一Jitterbuffer和所述第二Jitterbuffer根据第一或第二最低帧率策略，对所述至少一个音/视频帧构成音/视频流中发生异常的帧执行插帧判决，对异常进行修复后得到待处理的音/视频流。将待处理的视频流和待处理的音频流发送到第三Jitterbuffer，由第三Jitterbuffer根据原始输入时戳的时间顺序，对待处理的视频流和待处理的音频流进行音视频混排处理，得到第二媒体数据流。

技术领域

本发明涉及信息处理技术，尤其涉及一种媒体帧信息的处理方法及终端、计算机存储介质。

背景技术

由发送端和接收端构成的实时通讯系统中，音、视频数据包可能由于网络状况或人为因素(临时关闭本地视频或音频，或同时关闭)发生乱序、抖动、延时、断流等问题，这将导致接收端收到的音、视频数据出现时戳跳变、长时间无音频或无视频等异常现象。为了对异常进行修复，需要采取插帧或补流的技术。不同接收端对媒体数据运行插帧或补流的处理机制是不同的，导致兼容性不好，也达不到对异常修复的良好处理效果。

目前需要解决的问题是：需要提高接收端对媒体数据的兼容性，改善对异常修改的效果。然而，相关技术中，对于该问题，尚无有效解决方案。

发明内容

有鉴于此，本发明实施例提供了一种媒体流信息的处理方法及终端、计算机存储介质，至少解决了现有技术存在的问题。

本发明实施例的一种媒体流信息的处理方法，所述方法包括：

对由至少一个媒体帧信息构成的第一媒体数据流按照媒体帧类型进行分离，得到至少一个视频帧和至少一个音频帧；将所述至少一个视频帧发送到第一抖动缓冲区Jitterbuffer；

将所述至少一个音频帧发送到第二Jitterbuffer；

由所述第一Jitterbuffer根据第一最低帧率策略，对所述至少一个视频帧构成视频流中发生异常的帧执行插帧判决，根据判决结果对异常进行修复后得到待处理的视频流；

由所述第二Jitterbuffer根据第二最低帧率策略，对所述至少一个音频帧构成音频流中发生异常的帧执行插帧判决，根据判决结果对异常进行修复后得到待处理的音频流；

将所述待处理的视频流和所述待处理的音频流发送到第三Jitterbuffer；

由所述第三Jitterbuffer根据原始输入时戳的时间顺序，对所述待处理的视频流和所述待处理的音频流进行音视频混排处理，得到第二媒体数据流。

上述方案中，所述方法还包括：

设置初始缓冲最小包数，如果当前缓冲包数达到所述初始缓冲最小包数，则执行出队处理，否则，执行入队处理；

根据最低出队帧率得到最大出队时间间隔，如果当前时间与上一次成功出队的时间之差大于所述最大出队时间间隔，则执行第一预设操作，否则，结束出队处理，返回到入队处理。

上述方案中，所述由所述第一Jitterbuffer根据第一最低帧率策略，对所述至少一个视频帧构成视频流中发生异常的帧执行插帧判决，根据判决结果对异常进行修复后得到待处理的视频流，包括：

执行所述入队处理时，在初始状态下，设置初始缓冲结束标志为真TRUE；

读取输入的视频包，当需要等待的关键帧标志为TRUE时，确定入队的首包为关键帧；

若当前需要等待关键帧，但当前为非关键帧，则结束当前的入队处理，否则对所述视频包进行入队预处理；