[发明专利]一种基于车辆关键点轨迹的倒车判断方法、系统及介质在审
申请号: | 202010984873.6 | 申请日: | 2020-09-18 |
公开(公告)号: | CN112200834A | 公开(公告)日: | 2021-01-08 |
发明(设计)人: | 胡海峰;陈弟虎 | 申请(专利权)人: | 广东芯盾微电子科技有限公司 |
主分类号: | G06T7/246 | 分类号: | G06T7/246;G06K9/46;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 胡辉 |
地址: | 510000 广东省广州市高新技*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 车辆 关键 轨迹 倒车 判断 方法 系统 介质 | ||
1.一种基于车辆关键点轨迹的倒车判断方法,其特征在于,包括以下步骤:
获取包含目标车辆的连续视频帧;
将所述连续视频帧输入到YOLO目标检测模型,输出目标车辆检测框;
将所述车辆检测框内目标车辆图片输入到车辆关键点提取模型,输出车辆关键点粗特征图、车辆关键点细特征图和车辆方位特征向量;
根据目标车辆方位特征向量判断目标车辆的方位朝向,并筛选出n个可视车辆关键点细特征图,进而获取n个可视车辆关键点图像坐标;
根据所述n个可视车辆关键点图像坐标在连续视频帧的移动轨迹及相应判断规则,判断车辆是否倒车;
其中,n为正整数。
2.根据权利要求1所述的一种基于车辆关键点轨迹的倒车判断方法,其特征在于,所述车辆关键点提取模型包括关键点提取网络和车辆方位判断网络,所述关键点提取网络包括关键点粗提取网络和关键点细提取网络,所述车辆关键点提取模型由关键点粗提取网络、关键点细提取网络、车辆方位判断网络根据相关损失函数进行交替更新后获得。
3.根据权利要求2所述的一种基于车辆关键点轨迹的倒车判断方法,其特征在于,所述基于车辆关键点轨迹的倒车判断方法还包括建立所述车辆关键点提取模型的训练步骤,所述车辆关键点提取模型的训练步骤包括对所述关键点粗提取网络、所述关键点细提取网络、所述车辆方位判断网络进行训练的步骤,所述对所述关键点粗提取网络、所述关键点细提取网络、所述车辆方位判断网络进行训练这一步骤,包括以下步骤:
将带有关键点和方位标签的数据集输入至所述关键点粗提取网络后,获得车辆关键点粗特征图;
将所述车辆关键点粗特征图输入至所述车辆方位判断网络后,获得车辆方位特征向量;
将所述车辆关键点粗特征图输入至所述关键点细提取网络后,获得车辆关键点细特征图;
根据所述车辆关键点粗特征图、所述车辆关键点细特征图、所述车辆方位特征向量计算相关损失函数;
采用所述相关损失函数对所述关键点粗提取网络、所述关键点细提取网络、所述车辆方位判断网络进行训练。
4.根据权利要求3所述的一种基于车辆关键点轨迹的倒车判断方法,其特征在于,所述相关损失函数包括关键点特征图相关性损失函数和方位特征向量相关性损失函数,所述采用所述相关损失函数对所述关键点粗提取网络、所述关键点细提取网络、所述车辆方位判断网络进行训练这一步骤,包括以下步骤:
采用所述关键点特征图相关性损失函数对所述关键点粗提取网络和关键点细提取网络进行训练;
采用所述方位特征向量相关性损失函数对所述车辆方位判断网络进行训练。
5.根据权利要求1所述的一种基于车辆关键点轨迹的倒车判断方法,其特征在于,所述车辆关键点粗特征图和所述车辆关键点细特征图分别包含20个车辆关键点特征图,所述20个车辆关键点特征图包含车辆左前轮、左后轮、右前轮、右后轮、左雾灯、右雾灯、左前灯、右前灯、前车标、前车牌、左后视镜、右后视镜、左前顶角、右前顶角、左后顶角、右后顶角、左后灯、右后灯、后车标、后车牌的关键点特征图,所述的车辆20个车辆关键点特征图的最大特征值位于对应车辆关键点的图像坐标。
6.根据权利要求1所述的一种基于车辆关键点轨迹的倒车判断方法,其特征在于,所述目标车辆方位特征向量包括8个方向特征值,所述8个方向特征值包含正前、左前、正左、左后、正后、右后、正右、右前特征值,特征向量最大特征值对应的朝向为车辆真实方向。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东芯盾微电子科技有限公司,未经广东芯盾微电子科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010984873.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基因测序基片的制备方法
- 下一篇:一种窨井井口安全防护挡板