[发明专利]一种交通场景嵌入式多类目标端对端统一检测方法有效
申请号: | 201911346585.1 | 申请日: | 2019-12-24 |
公开(公告)号: | CN111160205B | 公开(公告)日: | 2023-09-05 |
发明(设计)人: | 刘军;陈岚磊 | 申请(专利权)人: | 江苏大学 |
主分类号: | G06V20/56 | 分类号: | G06V20/56;G06V20/40;G06V10/26;G06V10/44;G06V10/80;G06V10/82;G06N3/0464;G06N3/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 212013 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 交通 场景 嵌入式 类目 统一 检测 方法 | ||
1.一种交通场景嵌入式多类目标端对端统一检测方法,其特征在于,收集交通场景数据集,对交通目标和车道线进行标注;设计交通场景多类目标端对端统一检测的卷积神经网络模型,训练所述卷积神经网络模型,进行交通场景实车嵌入式端对端检测,输出预测的交通目标和车道线;
所述交通场景多类目标端对端统一检测的卷积神经网络模型包括基础网络模块、交通目标检测网络模块、车道线分割网络模块以及车道线可微分的加权最小二乘拟合模块;
所述车道线可微分的加权最小二乘拟合模块将maskAnn的实际车道线曲线标注作为基准,预测曲线与实际车道线曲线之间的面积作为整体损失函数中的车道线拟合损失函数,训练ResNet神经网络,拟合出虚实线曲线和黄白线曲线;
所述整体损失函数为:Lloss=Lcoordinate+Lconfidece+Lclass+Lmask+Lfit,其中Lcoordinate为交通目标的坐标损失函数,Lconfidece为交通目标的置信度损失函数,Lclass为交通目标的类别损失函数,Lmask为车道线掩膜损失函数,Lfit为车道线拟合损失函数;
所述交通目标的坐标损失函数Lcoordinate为:
式中,s2为输出特征图的网格单元数量,B为边界框的数量,表示第m个网格中第n个边界框存在负责物体的预测,λcorrd为坐标损失在总损失中的权重,xm、ym为真实位置中心坐标参数,为预测位置中心坐标参数,wm、hm为真实边界框的宽高,为预测边界框的宽高;
所述交通目标的置信度损失函数Lconfidece为:
式中,Cm为真实框置信度得分,是预测边界框置信度得分,λnoobj为最低的置信度预测惩罚,表示第m个网格中第n个边界框没有负责物体的预测;
所述交通目标的类别损失函数Lclass为:
式中,pm(c)为真实框类别概率,为预测边界框类别概率;
所述车道线掩膜损失函数Lmask为:
Lmask(pt)=-(1-pt)γlog(pt)
式中,p表示车道线像素点预测的概率,y为真实标签,γ为调节参数;
所述车道线拟合损失函数为Lfit:
式中,yβ表示ground-truth曲线,表示预测曲线。
2.根据权利要求1所述的交通场景嵌入式多类目标端对端统一检测方法,其特征在于,所述基础网络模块用于提取图片特征。
3.根据权利要求2所述的交通场景嵌入式多类目标端对端统一检测方法,其特征在于,所述交通目标检测网络模块利用多尺度特征图对交通目标进行检测,交通目标检测网络模块的26×26特征图与基础网络模块的13×13特征图上采样进行特征融合,交通目标检测网络模块的52×52特征图与基础网络模块的26×26特征图上采样进行特征融合。
4.根据权利要求1所述的交通场景嵌入式多类目标端对端统一检测方法,其特征在于,所述车道线分割网络模块采用编码器-解码器结构。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏大学,未经江苏大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911346585.1/1.html,转载请声明来源钻瓜专利网。