[发明专利]视频数据处理方法、装置、计算机设备和存储介质在审
| 申请号: | 202110013621.3 | 申请日: | 2021-01-06 |
| 公开(公告)号: | CN114782853A | 公开(公告)日: | 2022-07-22 |
| 发明(设计)人: | 刘兵;曹浩宇;郑岩;王斌;包志敏 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
| 主分类号: | G06V20/40 | 分类号: | G06V20/40;G06V30/41;G06V10/80;G06V10/82;G06K9/62;G06N3/08;G06N3/04 |
| 代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 唐彩琴;毛丹 |
| 地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 视频 数据处理 方法 装置 计算机 设备 存储 介质 | ||
1.一种视频数据处理方法,其特征在于,所述方法包括:
获取包含待鉴别证件的视频帧序列;
确定所述待鉴别证件在所述视频帧序列中的位置;
根据所述待鉴别证件在所述视频帧序列中的位置,确定所述待鉴别证件在所述视频帧序列中的多个位置状态;
将各个所述位置状态分别与预设动作对应的目标位置状态进行匹配,将匹配成功的位置状态对应的视频帧确定为待鉴别的候选关键帧;所述预设动作为使得标准证件的防伪点发生变化的动作,所述标准证件与所述待鉴别证件的类型一致;
根据所述候选关键帧,确定所述待鉴别证件的鉴别结果。
2.根据权利要求1所述的方法,其特征在于,所述确定所述待鉴别证件在所述视频帧序列中的位置包括:
根据所述视频帧序列中各视频帧的时间先后顺序,从所述视频帧序列中确定初始视频帧并获取所述初始视频帧中待鉴别证件的位置;
根据所述初始视频帧中待鉴别证件的位置,对所述视频帧序列中所述初始视频帧之后的视频帧进行目标跟踪,以确定所述待鉴别证件在所述初始视频帧之后的视频帧中的位置。
3.根据权利要求2所述的方法,其特征在于,所述根据所述视频帧序列中各视频帧的时间先后顺序,从所述视频帧序列中确定初始视频帧并获取所述初始视频帧中待鉴别证件的位置包括:
获取训练后的目标检测模型;所述目标检测模型包括卷积层和全连接层;
根据所述视频帧序列中各视频帧的时间先后顺序,从所述视频帧序列中确定当前视频帧;
将当前视频帧输入所述卷积层,通过所述卷积层对当前视频帧进行特征提取,得到当前视频帧对应的特征图;
将所述特征图输入所述全连接层,通过所述全连接层进行证件类别预测及位置回归,得到所述当前视频帧对应的证件类别预测结果及位置;
当当前视频帧对应的证件类别预测结果用于表征目标类别时,将当前视频帧确定为初始视频帧;
当当前视频帧对应的证件类别预测结果用于表征非目标类别时,从所述视频帧序列中当前视频帧之后的视频帧中重新确定当前视频帧并返回将当前视频帧输入所述卷积层的步骤。
4.根据权利要求1所述的方法,其特征在于,所述确定所述待鉴别证件在所述视频帧序列中的位置包括:
根据所述视频帧序列中各视频帧的时间先后顺序,从所述视频帧序列中确定初始视频帧并获取所述初始视频帧中待鉴别证件的位置;
根据所述初始视频帧对应的位置从所述初始视频帧中截取所述待鉴别证件所在区域图像,作为模板图;
从所述初始视频帧之后的视频帧中确定搜索图;
将所述模板图和所述搜索图输入训练后的目标跟踪模型中,通过所述目标跟踪模型基于所述模板图对所述搜索图进行目标跟踪处理,得到所述搜索图对应的跟踪结果;
根据所述跟踪结果确定所述待鉴别证件在所述搜索图中的位置。
5.根据权利要求4所述的方法,其特征在于,所述训练后的目标跟踪模型包括第一卷积层、相关层、第二卷积层、反卷积层和细化层;所述将所述模板图和所述搜索图输入训练后的目标跟踪模型中,通过所述目标跟踪模型基于所述模板图对所述搜索图进行目标跟踪处理包括:
分别将所述模板图和所述搜索图输入所述第一卷积层中,通过所述第一卷积层分别对所述模板图和所述搜索图进行特征提取,得到所述模板图对应的模板特征图及所述搜索图对应的搜索特征图;
将所述模板特征图及所述搜索特征图输入所述相关层,通过所述相关层对所述模板特征图和所述搜索特征图进行互相关,得到相关特征图;所述相关特征图包括多个候选窗口响应;
将所述相关特征图输入所述第二卷积层,分别得到分数特征图及掩膜特征图;所述掩膜特征图中包括各个候选窗口响应对应的掩膜特征子图,所述分数特征图包括各个掩膜特征子图对应的分数;
根据各个掩膜特征子图对应的分数从所述掩膜特征图中确定候选掩膜特征子图,将所述候选掩膜特征子图输入反卷积层,通过所述反卷积层对所述候选掩膜特征子图进行反卷积处理,得到目标掩膜特征子图;
将所述目标掩膜特征子图输入所述细化层,通过所述细化层对所述目标掩膜特征子图进行细化处理,得到所述搜索图对应的掩膜图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110013621.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:流程图的关联方法及电子设备
- 下一篇:消息传输方法和相关装置





