[发明专利]基于被跟踪目标运动轨迹对设备角度的调整方法及装置在审
申请号: | 202010501273.X | 申请日: | 2020-08-12 |
公开(公告)号: | CN111932579A | 公开(公告)日: | 2020-11-13 |
发明(设计)人: | 詹瑾;黄智慧;李伟键 | 申请(专利权)人: | 广东技术师范大学 |
主分类号: | G06T7/20 | 分类号: | G06T7/20;G06K9/46;G06N3/04;G06N3/08 |
代理公司: | 佛山市广盈专利商标事务所(普通合伙) 44339 | 代理人: | 李俊 |
地址: | 510630 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 跟踪 目标 运动 轨迹 设备 角度 调整 方法 装置 | ||
1.一种基于被跟踪目标运动轨迹对设备角度的调整方法,其特征在于,所述方法包括:
对视频依次进行帧拆分、按照时间顺序标注及去除冗余视频帧处理,获得视频帧序列;
基于目标检测网络模型对所述视频帧序列中进行待跟踪目标的检测,获得待跟踪目标的目标区域;
对所述待跟踪目标的目标区域在对应的视频帧序列中进行坐标定位,并记录坐标位置信息;
基于视频帧序列将当前视频帧中的待跟踪目标的目标区域与上一视频帧的待跟踪目标的目标区域进行关联计算,并获取待跟踪目标在所述视频帧序列中的运动轨迹;
基于待跟踪目标在所述视频帧序列中的运动轨迹生成对设备进行角度调整的调整指令,并发送至所述设备;
基于所述调整指令对所述设备的角度进行调整。
2.根据权利要求1所述的调整方法,其特征在于,所述目标检测网络模型为YOLOv3网络模型;
所述YOLOv3网络模型的损失函数包括目标置信度损失函数、目标类别损失函数和目标定位损失函数。
3.根据权利要求1所述的调整方法,其特征在于,所述基于目标检测网络模型对所述视频帧序列中进行待跟踪目标的检测之前,还包括:
将所述视频帧序列进行尺寸归一化处理,将所述视频帧序列中的图片尺寸归一化至416*416。
4.根据权利要求1所述的调整方法,其特征在于,所述对所述待跟踪目标的目标区域在对应的视频帧序列中进行坐标定位,包括:
将所述视频帧序列基于像素点构建像素坐标;
获取所述待跟踪目标的目标区域在对应的视频帧序列中的像素坐标位置进行坐标定位。
5.根据权利要求1所述的调整方法,其特征在于,所述基于视频帧序列将当前视频帧中的待跟踪目标的目标区域与上一视频帧的待跟踪目标的目标区域进行关联计算,包括:
基于视频帧序列将当前视频帧中的待跟踪目标的目标区域与上一视频帧的待跟踪目标的目标区域进行相似度的关联计算。
6.根据权利要求5所述的调整方法,其特征在于,所述基于视频帧序列将当前视频帧中的待跟踪目标的目标区域与上一视频帧的待跟踪目标的目标区域进行相似度的关联计算,包括:
基于视频帧序列将当前视频帧中的待跟踪目标的目标区域与上一视频帧的待跟踪目标的目标区域进行SIFT特征向量相似度的关联计算。
7.根据权利要求1所述的调整方法,其特征在于,所述获取待跟踪目标在所述视频帧序列中的运动轨迹,包括:
根据关联计算的结果判断上一视频帧的待跟踪目标的目标区域是否在当前视频帧中的待跟踪目标的目标区域出现;
在判断出现时,分别获得上一视频帧的待跟踪目标的目标区域和当前视频帧中的待跟踪目标的目标区域的坐标定位;
根据所述上一视频帧的待跟踪目标的目标区域和所述当前视频帧中的待跟踪目标的目标区域的坐标定位,获得待跟踪目标在所述视频帧序列中的运动轨迹。
8.根据权利要求1所述的调整方法,其特征在于,所述基于待跟踪目标在所述视频帧序列中的运动轨迹生成对设备进行角度调整的调整指令,包括:
根据待跟踪目标在所述视频帧序列中的运动轨迹预测所述待跟踪目标在所述视频帧序列中的下一视频帧的出现位置;
确定所述待跟踪目标在下一视频帧的出现位置超出规定区域时,根据所述出现位置获得需要调整所述设备的角度数据;
基于所述需要调整所述设备的角度数据生成对设备进行角度调整的调整指令。
9.根据权利要求1所述的调整方法,其特征在于,所述基于所述调整指令对所述设备的角度进行调整,包括:
解析所述调整指令,获得调整指令中的需要调整所述设备的角度数据;
基于需要调整所述设备的角度数据控制所述设备进行角度调整。
10.一种基于被跟踪目标运动轨迹对设备角度的调整装置,其特征在于,所述装置包括:
视频帧处理模块:用于对视频依次进行帧拆分、按照时间顺序标注及去除冗余视频帧处理,获得视频帧序列;
目标检测模块:用于基于目标检测网络模型对所述视频帧序列中进行待跟踪目标的检测,获得待跟踪目标的目标区域;
坐标定位模块:用于对所述待跟踪目标的目标区域在对应的视频帧序列中进行坐标定位,并记录坐标位置信息;
运动轨迹获取模块:用于基于视频帧序列将当前视频帧中的待跟踪目标的目标区域与上一视频帧的待跟踪目标的目标区域进行关联计算,并获取待跟踪目标在所述视频帧序列中的运动轨迹;
指令生成模块:用于基于待跟踪目标在所述视频帧序列中的运动轨迹生成对设备进行角度调整的调整指令,并发送至所述设备;
角度调整模块:同于基于所述调整指令对所述设备的角度进行调整。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东技术师范大学,未经广东技术师范大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010501273.X/1.html,转载请声明来源钻瓜专利网。