[发明专利]音视频处理方法、装置、电子设备及存储介质有效
申请号: | 202111044166.X | 申请日: | 2021-09-07 |
公开(公告)号: | CN113766146B | 公开(公告)日: | 2022-09-16 |
发明(设计)人: | 李明路 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | H04N5/262 | 分类号: | H04N5/262;H04N5/765;H04N5/91;H04N21/44;H04N21/439;H04N21/8547 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 装置 电子设备 存储 介质 | ||
1.一种音视频处理方法,包括:
获取包含目标音视频数据流的目标处理请求;其中,所述目标处理请求用便于识别的格式在预设字段记录其处理目的;
确定与所述目标处理请求对应的目标音视频管线;其中,音视频管线基于按链式结构排列的多个功能组件构成,各所述功能组件统一由预设的数据流分发模块派发输入数据、回收输出数据;
调用所述目标音视频管线持续处理所述目标音视频数据流,并持续输出经处理后得到的处理后音视频数据流;
控制所述数据流分发模块检测接收到的音视频数据的时间戳;
响应于根据所述时间戳确定有新音视频数据先于旧音视频数据被处理,丢弃未处理的旧音视频数据;其中,所述新音视频数据和所述旧音视频数据对应相同的生成源,且所述新音视频数据的已生成时长小于所述旧音视频数据的已生成时长。
2.根据权利要求1所述的方法,还包括:
响应于用于画面呈现的连续帧音视频数据的时间戳差超过预设时长,对所述连续帧音视频数据进行画面内容的连贯性处理。
3.根据权利要求1所述的方法,还包括:
控制所述数据流分发模块确定各所述功能组件的实际运行状态;
控制所述数据流分发模块根据所述实际运行状态调整与相应的功能组件存在关联关系的其它功能组件的功能参数。
4.根据权利要求3所述的方法,其中,所述控制所述数据流分发模块确定各所述功能组件的实际运行状态,包括:
控制所述数据流分发模块计算向每个所述功能组件派发输入数据和从每个所述功能组件回收输出数据的时间差;
控制所述数据流分发模块分别根据所述时间差确定相应的功能组件的实际处理耗时;
控制所述数据流分发模块根据所述实际处理耗时确定相应的功能组件的实际运行状态。
5.根据权利要求4所述的方法,其中,所述控制所述数据流分发模块根据所述实际处理耗时确定相应的功能组件的实际运行状态,包括:
响应于所述实际处理耗时处于与相同的功能组件对应的正常处理耗时区间中,控制所述数据流分发模块确定对应所述实际处理耗时的功能组件处于正常运行状态;其中,所述正常处理耗时区间基于确定处于正常运行状态的相同功能组件的历史处理耗时情况确定得到;
响应于所述实际处理耗时未处于与相同的功能组件对应的正常处理耗时区间中,控制所述数据流分发模块确定对应所述实际处理耗时的功能组件处于异常运行状态。
6.根据权利要求3所述的方法,还包括:
响应于所述实际运行状态超出了所述功能参数的调整上限,控制所述数据流分发模块上报功能组件异常通知。
7.根据权利要求1-6任一项所述的方法,其中,所述目标音视频管线包括单一音视频管线和复合音视频管线,所述复合音视频管线基于多个所述单一音视频管线封装得到。
8.一种音视频处理装置,包括:
请求获取单元,被配置成获取包含目标音视频数据流的目标处理请求;其中,所述目标处理请求用便于识别的格式在预设字段记录其处理目的;
目标管线确定单元,被配置成确定与所述目标处理请求对应的目标音视频管线;其中,音视频管线基于按链式结构排列的多个功能组件构成,各所述功能组件统一由预设的数据流分发模块派发输入数据、回收输出数据;
目标管线调用及输出返回单元,被配置成调用所述目标音视频管线持续处理所述目标音视频数据流,并持续输出经处理后得到的处理后音视频数据流;
时间戳检测单元,被配置成控制所述数据流分发模块检测接收到的音视频数据的时间戳;
异步处理单元,被配置成响应于根据所述时间戳确定有新音视频数据先于旧音视频数据被处理,丢弃未处理的旧音视频数据;其中,所述新音视频数据和所述旧音视频数据对应相同的生成源,且所述新音视频数据的已生成时长小于所述旧音视频数据的已生成时长。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111044166.X/1.html,转载请声明来源钻瓜专利网。