[发明专利]目标检测跟踪方法、装置、电子设备和存储介质在审
申请号: | 202010784786.6 | 申请日: | 2020-08-06 |
公开(公告)号: | CN111915639A | 公开(公告)日: | 2020-11-10 |
发明(设计)人: | 项伟;王俊东;陈绿然;叫洁宁 | 申请(专利权)人: | 广州市百果园信息技术有限公司 |
主分类号: | G06T7/20 | 分类号: | G06T7/20;G06K9/00;G06N3/04;G06K9/32 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 511402 广东省广州市番*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标 检测 跟踪 方法 装置 电子设备 存储 介质 | ||
1.一种目标检测跟踪方法,其特征在于,包括:
将从视频流接收到的每个视频帧输入跟踪网络中得到所述视频帧的目标跟踪结果;
在所述视频帧为关键帧时,将所述关键帧输入检测网络并控制所述检测网络在接收延迟帧期间运行,以在接收完最后一帧延迟帧时输出目标检测结果,其中,所述关键帧为所述视频流中用于目标检测的视频帧,所述延迟帧为所述关键帧后连续的、指定数量的视频帧;
根据所述目标检测结果和所述最后一帧延迟帧的目标跟踪结果生成最终目标跟踪结果。
2.根据权利要求1所述的方法,其特征在于,所述在所述视频帧为关键帧时,将所述关键帧输入检测网络中并控制所述检测网络在接收延迟帧期间运行,以在接收完最后一帧延迟帧时输出目标检测结果,包括:
在所述视频帧为关键帧时,确定指定数量的延迟帧;
根据所述延迟帧的数量确定所述检测网络的多个计算节点;
在将所述关键帧输入所述检测网络后,每接收到一个所述延迟帧时控制所述检测网络的多个计算节点依次开始运行,以在接收完最后一帧延迟帧时输出目标检测结果。
3.根据权利要求2所述的方法,其特征在于,所述检测网络为包括多个层级子网络的级联检测网络,所述在所述视频帧为关键帧时,确定指定数量的延迟帧,包括:
获取所述级联检测网络的子网络的第一数量;
根据所述第一数量,将所述关键帧后连续的多个视频帧确定为延迟帧。
4.根据权利要求3所述的方法,其特征在于,所述根据所述延迟帧的数量确定所述检测网络的多个计算节点,包括:
将所述级联检测网络的每个子网络的输入节点设置为计算节点。
5.根据权利要求4所述的方法,其特征在于,所述每接收到一个所述延迟帧时控制所述检测网络的多个计算节点依次开始运行,以在接收完最后一帧延迟帧时输出目标检测结果,包括:
在将所述关键帧输入所述级联检测网络的第一层级子网络后,每接收到一个所述延迟帧时,将上一层级子网络输出的检测结果和所述延迟帧输入当前层级子网络中;
在接收最后一帧延迟帧后,将所述当前层级子网络输出的检测结果作为所述检测网络的目标检测结果。
6.根据权利要求2所述的方法,其特征在于,所述检测网络为非级联检测网络,所述在所述视频帧为关键帧时,确定指定数量的延迟帧,包括:
确定所述关键帧后连续的、预设数量的视频帧为延迟帧。
7.根据权利要求6所述的方法,其特征在于,所述根据所述延迟帧的数量确定所述检测网络的多个计算节点,包括:
预估所述检测网络对所述关键帧执行目标检测所需要的总时长;
采用所述总时长和所述预设数量计算所述检测网络的计算节点的运行结束时间。
8.根据权利要求7所述的方法,其特征在于,所述在将所述关键帧输入所述检测网络后,每接收到一个所述延迟帧时控制所述检测网络的多个计算节点依次开始运行,以在接收完最后一帧延迟帧时输出目标检测结果,包括:
在将所述关键帧输入所述非级联检测网络后,计算所述非级联网络的运行时间;
在所述运行时间为所述计算节点运行结束时间时,暂停运行所述非级联检测网络;
当每接收到一个所述延迟帧时,从暂停的计算节点恢复运行所述非级联检测网络;
在接收到最后一帧延迟帧时,将恢复运行后所述非级联检测网络输出的检测结果作为所述检测网络的目标检测结果。
9.根据权利要求1-8任一项所述的方法,其特征在于,在将所述关键帧输入检测网络中并控制所述检测网络在接收延迟帧期间运行,以在接收完最后一帧延迟帧时输出目标检测结果之前,还包括:
判断所述视频帧是否为关键帧;
若是,执行将所述关键帧输入检测网络中并控制所述检测网络在接收延迟帧期间运行,以在接收完最后一帧延迟帧时输出目标检测结果的步骤;
若否,输出所述视频帧的目标跟踪结果。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州市百果园信息技术有限公司,未经广州市百果园信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010784786.6/1.html,转载请声明来源钻瓜专利网。