[发明专利]行为识别方法及装置、设备和存储介质在审
申请号: | 202110449968.2 | 申请日: | 2021-04-25 |
公开(公告)号: | CN113111839A | 公开(公告)日: | 2021-07-13 |
发明(设计)人: | 苏海昇;苏婧;王栋梁 | 申请(专利权)人: | 上海商汤智能科技有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/32;G06K9/62;G06N20/00 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 刘鹤;张颖玲 |
地址: | 200233 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 行为 识别 方法 装置 设备 存储 介质 | ||
1.一种行为识别方法,其特征在于,所述方法包括:
获取待识别视频序列中每一帧图像中每一对象的检测结果;
根据每一所述对象的检测结果,生成至少一个第一序列;其中,每一所述第一序列为包括同一对象的轨迹序列;
对每一所述第一序列进行行为识别,得到每一所述对象的行为识别结果。
2.如权利要求1所述的方法,其特征在于,所述待识别视频序列是通过以下过程得到的:
按照特定时间间隔,从视频源中选取至少两帧图像;
将所述至少两帧图像存入帧序列缓冲区;其中,所述帧序列缓冲区的长度固定;
获取所述帧序列缓冲区中的帧图像作为所述待识别视频序列。
3.如权利要求1或2所述的方法,其特征在于,所述对象的检测结果至少包括所述对象的检测框和与所述检测框关联的对象标识;
所述根据每一所述对象的检测结果,生成至少一个第一序列,包括:
从每一所述对象的检测框中,选择在空间位置上独立的检测框作为候选检测框;
根据所述候选检测框和与所述候选检测框关联的对象标识,生成所述至少一个第一序列。
4.如权利要求3所述的方法,其特征在于,所述每一帧图像中包括一个检测框,所述从每一所述对象的检测框中,选择在空间位置上独立的检测框作为候选检测框,包括:
将所述每一帧图像中的一个检测框作为所述候选检测框。
5.如权利要求3所述的方法,其特征在于,所述每一帧图像中包括至少两个检测框,所述从每一所述对象的检测框中,选择在空间位置上独立的检测框作为候选检测框,包括:
确定所述每一帧图像中的至少两个检测框之间的交并比;
根据所述交并比,生成所述每一帧图像对应的邻接矩阵;
将所述邻接矩阵中匹配次数为零的检测框作为所述候选检测框。
6.如权利要求3至5任一项所述的方法,其特征在于,所述根据所述候选检测框和与所述候选检测框关联的对象标识,生成所述至少一个第一序列,包括:
对与每一所述对象标识关联的候选检测框在空间位置上取并集,得到与每一所述对象标识对应的最小包围框;
根据所述最小包围框,截取所述每一帧图像中与所述最小包围框对应的区域图像;
按照所述每一帧图像的时间戳,依次连接所述区域图像,得到与每一所述对象标识对应的第一序列。
7.如权利要求5所述的方法,其特征在于,所述方法还包括:
对每一所述对象的检测框,向外扩展特定比例,得到扩展后的检测框;
从所述扩展后的检测框中筛选至少两个第一检测框;其中,所述第一检测框的面积大于所述扩展后的检测框中的其他检测框;
所述确定所述每一帧图像中的至少两个检测框之间的交并比,包括:
确定所述至少两个第一检测框之间的交并比。
8.如权利要求7所述的方法,其特征在于,所述候选检测框为从所述至少两个第一检测框中选择的,所述根据所述候选检测框和与所述候选检测框关联的对象标识,生成所述至少一个第一序列,包括:
对所述候选检测框,按照所述特定比例进行内缩,得到原始尺寸的候选检测框;
根据所述原始尺寸的候选检测框和与所述候选检测框关联的对象标识,生成所述至少一个第一序列。
9.如权利要求6所述的方法,其特征在于,所述方法还包括:
确定所述区域图像中除去所述候选检测框之外的噪声区域;
利用纯色背景填充所述噪声区域,得到目标区域图像;
相应地,按照所述每一帧图像的时间戳,依次连接所述目标区域图像,得到与每一所述对象标识对应的第一序列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海商汤智能科技有限公司,未经上海商汤智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110449968.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:空调器的控制方法及空调器
- 下一篇:一种大鼠牙周炎模型建模剪