[发明专利]一种基于超分-yolo网络的小目标检测方法在审

专利信息
申请号: 202310255946.1 申请日: 2023-03-16
公开(公告)号: CN116245860A 公开(公告)日: 2023-06-09
发明(设计)人: 陈丹;羊淼海;谭钦;林哲;柯寅 申请(专利权)人: 福州大学
主分类号: G06T7/00 分类号: G06T7/00;G06V10/82;G06V10/774;G06T3/40;G06N3/0464;G06N3/0455;G06N3/08
代理公司: 福州元创专利商标代理有限公司 35100 代理人: 郭东亮;蔡学俊
地址: 350108 福建省福州市*** 国省代码: 福建;35
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 基于 yolo 网络 目标 检测 方法
【权利要求书】:

1.一种基于超分-yolo网络的小目标检测方法,其特征在于:所述方法以yolo网络作为基础网络架构,与超分模块相结合并加入位置注意力机制、自注意力机制以及引入递归空洞卷积模块,以凸显小目标位置信息,增强细节特征;包括以下步骤;

步骤一、采集图像并对图像进行预处理生成原图;

步骤二、以超分拟合网络与经过改进后的yolo目标识别网络联接,构成超分-yolo网络模型,对原图处理并输出分辨率更高的超清图像,再对该超清图像进行提取特征、目标框回归分类与物体检测识别等操作,得到被识别的图像,形成训练用数据集;

步骤三、训练小目标物体检测模型;

步骤四、将训练好的模型用于小目标物体检测。

2.根据权利要求1所述的一种基于超分-yolo网络的小目标检测方法,其特征在于:所述步骤一包括以下步骤;

步骤1-1、图像获取:将相机摆放至特定位置,再通过相机获取小物体图像,即带有小目标物体的图像;

步骤1-2、图像切割:根据拍摄到带有小目标物体的图像,使用双线性插值将所有图像以图像中的每个像素点为中心填充成小正方形,即对图片的每一个像素进行扩充处理;

步骤1-3、样本集制作:将上一步带有小目标的小正方形图像手动添加像素级标签,制作成小目标样本集。

3.根据权利要求1所述的一种基于超分-yolo网络的小目标检测方法,其特征在于:所述步骤二中,超分拟合网络是特征提取网络与超分线性拟合网络组合而成,原图经过超分拟合网络输出分辨率更高的超清图像;具体包括:

步骤2-1、所述超分拟合网络由超分特征提取网络Encoder与超分线性拟合网络LIIF组合而成;超分特征提取网络Encoder采用递归空洞卷积获取原始图像的浅层特征,再连接一个残差组进行深度特征提取,然后再采用亚像素卷积的方式进行上采样,最后通过一个卷积层重建放大的特征,获得特征张量;超分线性拟合网络先对经超分特征提取网络获得的特征张量进行展开,将隐特征的局部近邻对齐并进行特征丰富处理,然后对展开变换后的特征进行解码操作,生成超清图像;

步骤2-2、将生成的超清图像送至改进后的yolo目标识别网络进行特征提取,再将提取到的特征经过网络头部模块进行特征融合处理,得到大、中、小三种尺寸的特征,融合后的特征被用于预测目标种类和位置,最后输出检测结果。

4.根据权利要求3所述的一种基于超分-yolo网络的小目标检测方法,其特征在于:所述改进后的yolo目标识别网络,其改进点在于,

改进点一、使用三个卷积层通过前向传播输入到Hornet,组合成新的架构ConvHB,并用ConvHB模块代替原yolo骨干网络backbone的ELAN模块,降低了运算复杂度,形成高有效的空间交互建模方式;

改进点二、用卷积层Conv和Vision Transformer模块ViT连接形成新的CViT模块,通过引入上下文信息以提高对于小目标物体的检测;

改进点三、引入位置注意力机制以突显小目标物体位置信息,将特征X输入卷积核大小为1×W和H×1的两个卷积层,分别生成A和B两个向量;在A和B之间进行一个矩阵乘法的操作,并用一个softmax层来获得位置注意力图S;将原特征X乘上位置注意力图S,进而和特征X进行元素求和,生成最终增强后的特征图Y;最后将位置注意力机制WZ模块移植到目标识别主干网络的最后一层当中。

5.根据权利要求3所述的一种基于超分-yolo网络的小目标检测方法,其特征在于:所述步骤三包括以下步骤;

步骤3-1、参数初始化设置:在训练过程中,图像大小调整为Hi×Wi;训练次数、初始学习速率和批量大小也设置为a、b和c;采用余弦退火学习率调整方法调整学习率b;选择Adam作为优化器以使数据集更快得到最优值;在训练阶段,进行随机裁剪,随机亮度,随机旋转的图像增强操作;

步骤3-2、开始训练:将训练样本输入SR-yolo检测模型中;

步骤3-3、更新参数:采用的损失函数包括三部分:矩形框损失、置信度损失、分类损失;

步骤3-4、输出模型:重复步骤3-2、步骤3-3,当训练次数达到设定值后,停止训练,输出损失值最小的模型。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福州大学,未经福州大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202310255946.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top