[发明专利]一种基于YOLOv4模型的挖掘机图像识别方法在审

专利信息
申请号: 202011526693.X 申请日: 2020-12-22
公开(公告)号: CN112465072A 公开(公告)日: 2021-03-09
发明(设计)人: 孔祥杰;王辉;夏锋;沈国江;倪琦超;侯明良 申请(专利权)人: 浙江工业大学
主分类号: G06K9/62 分类号: G06K9/62;G06N3/04;G06N3/08
代理公司: 杭州天正专利事务所有限公司 33201 代理人: 王兵
地址: 310014 浙*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 yolov4 模型 挖掘机 图像 识别 方法
【权利要求书】:

1.一种基于YOLOv4模型的挖掘机图像识别方法,包括如下步骤:

S1:从电子监控设备中提取监控图片;

S2:对所述监控图片中的挖掘机进行标注,形成VOC数据集,其中标签文件的主要属性有图片宽度width、图片高度height、图片深度depth,挖掘机所在位置xmin、ymin、xmax、ymax;

S3:将步骤S2中通过标注得到的所述数据集分割为训练数据集和测试数据集;

S4:将步骤S3中的训练数据集输入到YOLOv4目标检测算法中,进行训练;

S5:对所述训练数据集进行50轮迭代训练,获取五个最优模型;

S6:对得到的五个最优模型进行性能分析,得到一个最优目标检测模型;所述目标检测模型用于从监控图片中检测出挖掘机图像区域;

S7:将所述目标检测模型用于识别挖掘机图像,如果识别结果为挖掘机图像时,则生成预警信息,通知监管人员;否则,收集识别错误数据,识别结束。

2.根据权利要求1所述的一种基于YOLOv4模型的挖掘机图像识别方法,其特征在于:步骤S5中所述获取五个最优模型过程如下:

S5-1:对每一轮迭代训练,都进行损失函数loss的计算,具体公式如下:

loss=lbox+lobj+lcls (1),

其中,lbox为挖掘机真实位置与预测位置之间的loss,lobj为置信度的loss,lcls为预测类与真实类之间的loss;

并且,此模型仅检测挖掘机一种类别的物体,因此lcls=0,其余部分具体公式如下:

其中

其中,S代表grid size,S2代表13x13,26x26,52x52个网格;B代表每个网格产生候选框anchor个数;b和表示anchor框和目标框的中心点;ρ表示两个中心点的欧式距离;c代表的是可以同时覆盖anchor框和目标框的最小矩形的对角线距离;代表第i个候选框所在位置;ω,h代表第i个实际框所在位置;

其中,S代表grid size,S2代表13x13,26x26,52x52个网格;B代表每个网格产生候选框anchor个数;λcoordnoobjobj三者都取值为1;代表如果在i,j处的box有目标,其值为1,否则为0;代表如果在i,j处的box没有目标,其值为1,否则为0;xi,yii,hi代表第i个实际框所在位置;代表第i个候选框所在位置;ci代表第i个框实际置信度;代表第i个候选框置信度;

S5-2:从迭代生成的50个loss值中选取最小的五个,得到五个最优模型。

3.根据权利要求1所述的一种基于YOLOv4模型的挖掘机图像识别方法,其特征在于:步骤S6中所述对得到的五个最优模型进行性能分析过程如下:

S6-1:获取测试数据集中挖掘机的实际位置;

S6-2:取其中一模型进行测试数据集中挖掘机的识别,获取挖掘机预测位置;

S6-3:计算对应IOU值,衡量预测框和真实框的重合程度,结果为0至1之间,具体公式如下:

其中,S表示预测位置与实际位置之间的重叠区域;S为预测位置和实际位置所占有的总区域;

S6-4:计算对应精确度Precision和召回率Recall,具体公式如下:

其中,当IOU=0.5被认为是TP,当IOU=0.5被认为是FP,Recall所用的TP+FN=N,一张图片所具有的N个目标,图片中挖掘机真实位置个数;

S6-5:进行AP值的计算,具体公式如下:

其中

其中,为时,Precision对应值;

S6-6:将五个模型分别进行上述操作,从生成的五个AP值中选取最小的一个,得到一个最优目标检测模型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江工业大学,未经浙江工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202011526693.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top