[发明专利]一种支持多路视频同步的音视频缓存方法和装置

说明书

本发明涉及音视频处理技术领域，更具体地，涉及一种支持多路视频同步的音视频缓存方法和装置。所述方法包括：获取主通道视频数据的主通道视频帧率和子通道视频数据的子通道视频帧率并进行缓存得到主通道视频缓存、子通道视频缓存；对主通道视频缓存进行取帧播放，根据主通道视频帧率统计主通道视频缓存已播放时长；根据子通道视频帧率计算子通道视频缓存下一次要取帧播放的时间点并与主通道视频缓存已播放时长进行比较判断子通道视频缓存是否达到取帧播放条件。本发明通过更精细化的分级速度控制，并以主通道视频缓存的播放帧率控制为核心，对子通道视频缓存、音频缓存的播放帧率同步控制，支持多通道视频、音频的同步，更好的适配多摄产品。

技术领域

本发明涉及音视频处理技术领域，更具体地，涉及一种支持多路视频同步的音视频缓存方法和装置。

背景技术

当前，伴随着网络技术的大力推广及普及，具有视频监控、远程看护、实时报警等功能的网络摄像机已经成为很多家庭的普遍选择。而随着网络摄像机清晰度的提升，4G摄像机以及双摄甚至三摄等产品市场份额的逐步扩大，流畅的视频观看体验、多摄视频的同步播放就显得尤为重要。

由于不同地区宽带、4G信号强度的差异，网络摄像机的网络状态并不能很好地处于一个稳定的状态，加上网络抖动的影响，这就可能会导致视频观看卡顿、画面不动等问题，影响观看体验。而对于双摄、三摄等产品，可能会造成不同通道视频的不同步问题，这就需要设计一个合理的音视频缓存方法来解决这些问题。

例如，申请号为CN201710818019.0的专利提出通过客户端播放器在播放过程中动态调整音视频播放速率，来平衡网络波动导致的卡顿和延时。但是此种设计方式的缓存，对视频帧率会动态改变的场景并不能很好地自适应，且播放速度控制精度较为粗糙，不实际，且不支持多通道视频同步播放控制。

发明内容

本发明的目的在于至少解决背景技术中所提出的问题之一，为实现本发明的目的，采用以下技术方案：

本发明一实施例提出一种支持多路视频同步的音视频缓存方法，包括：

获取主通道视频数据的主通道视频帧率和子通道视频数据的子通道视频帧率并进行缓存得到主通道视频缓存、子通道视频缓存；

对主通道视频缓存进行取帧播放，根据主通道视频帧率统计主通道视频缓存已播放时长；

根据子通道视频帧率计算子通道视频缓存下一次要取帧播放的时间点并与主通道视频缓存已播放时长进行比较判断子通道视频缓存是否达到取帧播放条件。

进一步的改进在于，对主通道视频缓存进行取帧播放，根据主通道视频帧率统计主通道视频缓存已播放时长的具体方法包括：

根据主通道视频帧率和主通道视频缓存当前帧数得到主通道视频缓存实时时长；

把主通道视频缓存实时时长与预设缓存时长进行比较，根据比较结果对主通道视频缓存的播放帧率进行动态调整。

进一步的改进在于，把主通道视频缓存实时时长与预设缓存时长进行比较，根据比较结果对主通道视频缓存的播放帧率进行动态调整的具体方法包括：

当主通道视频缓存实时时长小于预设缓存时长时，则降低主通道视频缓存的播放帧率；

当主通道视频缓存实时时长大于预设缓存时长时，则提高主通道视频缓存的播放帧率。

进一步的改进在于，对主通道视频缓存进行取帧播放，根据主通道视频帧率统计主通道视频缓存已播放时长的具体方法包括：

根据播放帧率计算下一帧主通道视频待播放的时间间隔；

获取当前时间和主通道视频缓存最近一次的取帧播放时间的时间差值；

判断时间差值是否大于时间间隔；