[发明专利]视频流处理方法、系统、电子装置和存储介质有效
申请号: | 202110128892.3 | 申请日: | 2021-01-29 |
公开(公告)号: | CN112954449B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 刘俊 | 申请(专利权)人: | 浙江大华技术股份有限公司 |
主分类号: | H04N21/44 | 分类号: | H04N21/44;H04N21/4402;G06V20/40;G06V10/94;G06V10/96;G06F9/50;G06F16/783 |
代理公司: | 杭州华进联浙知识产权代理有限公司 33250 | 代理人: | 聂磊 |
地址: | 310016 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 处理 方法 系统 电子 装置 存储 介质 | ||
本申请涉及一种视频流处理方法、系统、电子装置和存储介质,其中,该方法包括:通过前级分析单元处理视频流,得到第一分析结果,其中,前级分析单元包括多路目标识别分析器;将第一分析结果加入缓冲队列;通过后级分析单元从缓冲队列中提取并处理第一分析结果,得到第二分析结果,其中,后级分析单元包括多路信息提取分析器。通过本申请,解决了相关技术中视频流分析的性能不高的问题,提升了视频流分析的性能。
技术领域
本申请涉及视频流分析技术领域,特别是涉及视频流处理方法、视频流处理系统、电子装置和存储介质。
背景技术
视频流分析通常由多级分析单元来完成,图1是根据相关技术的视频流处理系统的结构框图,如图1所示,该系统包括前级分析单元和后级分析单元,前级分析单元包括多路目标识别分析器,后级分析单元包括多路信息提取分析器,其中,目标识别分析器和信息提取分析器一对一连接。前级分析单元用于对视频内容进行目标识别处理,将识别得到的这些目标交由后级分析单元进行信息提取处理,然后将提取的信息输出至存储器进行存储,当需要查询相关视频流中的内容时,可以大幅度提高检索效率。
分析单元主要通过智能算法模型来实现,运行一类智能算法模型进行分析需要消耗芯片智能算法分析能力,简称算力。一款芯片的算力有限,相关技术在提高视频流分析性能方面提供了以下几个方案:
方案一,从视频源入手,采用一定策略减少待分析视频源,例如先做动态监测,将符合预设策略的视频再发送至分析单元进行智能分析。然而,该方案存在的缺点为:采用预设策略减少待分析视频源,需要消耗额外的性能,不一定适应所有场景,且裁剪后的码流会影响智能分析,造成分析结果不准确。
方案二,GPU将硬解码后的视频数据存储在GPU的显存中;GPU将显存中存储的视频数据映射到DMA缓冲区;CPU从DMA缓冲区中获取到显存中存储的视频数据对应的显存地址,并利用显存地址访问GPU的显存;CPU对GPU的显存中存储的视频数据进行智能分析。从硬件特性角度优化,利用DMA减少CPU数据拷贝的压力,减轻设备处理负担。然而,该方案存在的缺点为:依赖芯片特性,导致应用不灵活。
目前针对相关技术中视频流分析的性能不高的问题,尚未提出有效的解决方案。
发明内容
本申请实施例提供了一种视频流处理方法、系统、电子装置和存储介质,以至少解决相关技术中视频流分析的性能不高的问题。
第一方面,本申请实施例提供了一种视频流处理方法,包括:通过前级分析单元处理视频流,得到第一分析结果,其中,所述前级分析单元包括多路目标识别分析器;将所述第一分析结果加入缓冲队列;通过后级分析单元从所述缓冲队列中提取并处理所述第一分析结果,得到第二分析结果,其中,所述后级分析单元包括多路信息提取分析器。
在其中一些实施例中,所述方法还包括:监测所述缓冲队列的长度;在所述缓冲队列的长度大于第一设定长度的情况下,缓存准备加入所述缓冲队列的第一分析结果,直至所述缓冲队列的长度小于第二设定长度的情况下,将缓存的第一分析结果加入到所述缓冲队列,其中,所述第一设定长度大于或等于所述第二设定长度。
在其中一些实施例中,在通过前级分析单元处理视频流,得到第一分析结果之前,所述方法还包括:根据所述前级分析单元对所述视频流进行处理所需要的算力确定所述目标识别分析器的路数;和/或,根据所述后级分析单元对所述第一分析结果进行处理所需要的算力确定所述信息提取分析器的路数。
在其中一些实施例中,根据所述前级分析单元对所述视频流进行处理所需要的算力确定所述目标识别分析器的路数包括:
获取每一路所述信息提取分析器在单位时间内处理所述第一分析结果实际所消耗的平均算力;获取每一路所述目标识别分析器在单位时间内处理预设规格视频流需消耗的第一预设算力;获取在单位时间内分配至所述目标识别分析器和所述信息提取分析器的预设总算力;根据所述平均算力、所述第一预设算力和所述预设总算力,确定所述目标识别分析器的路数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大华技术股份有限公司,未经浙江大华技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110128892.3/2.html,转载请声明来源钻瓜专利网。