[发明专利]一种音视频同步方法、装置、电子设备及存储介质在审
申请号: | 202210302160.6 | 申请日: | 2022-03-24 |
公开(公告)号: | CN114630170A | 公开(公告)日: | 2022-06-14 |
发明(设计)人: | 常皓诚;白帅;桂琨智 | 申请(专利权)人: | 北京字节跳动网络技术有限公司 |
主分类号: | H04N21/43 | 分类号: | H04N21/43;H04N21/439;H04N21/44 |
代理公司: | 北京远智汇知识产权代理有限公司 11659 | 代理人: | 刘欣 |
地址: | 100041 北京市石景山区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 视频 同步 方法 装置 电子设备 存储 介质 | ||
本公开实施例公开了一种音视频同步方法、装置、电子设备及存储介质,该方法包括:当检测到待消费音频数据队列中音频数据消费异常时,使播放器时钟由与音频时钟同步的状态切换为与自然时钟同步的状态;读取待写入待消费音频数据队列的音频数据包,并根据待写入待消费音频数据队列的音频数据包的显示时间戳以及播放器时钟的实时时间,更新待消费音频数据队列中的音频数据包,直到音频数据消费异常状态恢复正常;将播放器时钟切换回与音频时钟同步的状态,使待消费音频数据队列中更新后的音频数据包与对应的视频数据同步播放,视频数据的播放时钟与播放器时钟同步。本公开实施例的技术方案,提升了用户在整体上的音视频播放体验。
技术领域
本公开实施例涉及计算机技术领域,尤其涉及一种音视频同步方法、装置、电子设备及存储介质。
背景技术
由于人在音视频播放体验中的听觉敏感度高于视觉敏感度,更容易感受到音频不连续、等待或卡顿等情况;因此,大多数播放器采用的是视频数据与音频数据播放时钟同步的音画同步策略,优先保证音频播放的流畅与连续,以保证用户的播放体验。
但是,视频数据同步音频数据的音画同步方案,在音频组件渲染异常、用户音频设备切换等导致音频渲染异常的场景下,会导致音频的播放进度被阻塞,音频数据播放时钟停滞,若播放进度阻塞的时间达到一定的感知阈值,仍会造成视频渲染异常被用户感知到,影响用户体验。
发明内容
本公开实施例提供了一种音视频同步方法、装置、电子设备及存储介质,能够在视频向音频同步的音视频数据同步场景下,在音频数据播放出现异常时,保证播放器时钟的正常运行,使视频数据正常渲染播放,从而可以提升用户在整体上的音视频播放体验。
第一方面,本公开实施例提供了一种音视频同步方法,该方法包括:
当检测到待消费音频数据队列中音频数据消费异常时,使播放器时钟由与音频时钟同步的状态切换为与自然时钟同步的状态;
读取待写入所述待消费音频数据队列的音频数据包,并根据所述待写入所述待消费音频数据队列的音频数据包的显示时间戳以及所述播放器时钟的实时时间,更新所述待消费音频数据队列中的音频数据包,直到音频数据消费异常状态恢复正常;
将所述播放器时钟由所述与自然时钟同步的状态切换回所述与音频时钟同步的状态,以使所述待消费音频数据队列中的更新后的音频数据包与对应的视频数据同步播放,其中,在音视频数据播放过程中,所述视频数据的播放时钟与所述播放器时钟同步。
第二方面,本公开实施例提供了一种音视频同步装置,该装置包括:
同步时钟切换模块,用于当检测到待消费音频数据队列中音频数据消费异常时,使播放器时钟由与音频时钟同步的状态切换为与自然时钟同步的状态;
音频数据队列更新模块,用于读取待写入所述待消费音频数据队列的音频数据包,并根据所述待写入所述待消费音频数据队列的音频数据包的显示时间戳以及所述播放器时钟的实时时间,更新所述待消费音频数据队列中的音频数据包,直到音频数据消费异常状态恢复正常;
音视频数据同步播放模块,用于将所述播放器时钟由所述与自然时钟同步的状态切换回所述与音频时钟同步的状态,以使所述待消费音频数据队列中的更新后的音频数据包与对应的视频数据同步播放,其中,在音视频数据播放过程中,所述视频数据的播放时钟与所述播放器时钟同步。
第三方面,本公开实施例还提供了一种电子设备,所述电子设备包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开实施例任一所述的音视频同步方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字节跳动网络技术有限公司,未经北京字节跳动网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210302160.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于多模块U-BiLSTM网络的轴承寿命预测方法
- 下一篇:管件环缝焊接装置