[发明专利]一种基于深度学习的遥感图像目标检测方法有效
申请号: | 202110687924.3 | 申请日: | 2021-06-21 |
公开(公告)号: | CN113468993B | 公开(公告)日: | 2022-08-26 |
发明(设计)人: | 雷建军;王梦园;彭勃;张轩宇;于传波;郭亭佚 | 申请(专利权)人: | 天津大学 |
主分类号: | G06V20/13 | 分类号: | G06V20/13;G06V10/40;G06V10/764;G06V10/80;G06N3/04;G06N3/08 |
代理公司: | 天津市北洋有限责任专利代理事务所 12201 | 代理人: | 李林娟 |
地址: | 300072*** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 深度 学习 遥感 图像 目标 检测 方法 | ||
本发明公开了一种基于深度学习的遥感图像目标检测方法,方法包括:以遥感图像作为输入,使用特征金字塔网络提取不同尺度的特征图;构建自底向上的细粒度增强模块,用于底层特征向上传递、与上层特征逐层融合,实现自底向上加强细粒度信息、优化目标定位;在细粒度信息的基础上获取检测框位置的初步预测,确定初步预测框的位置;使用卷积网络搭建预测头,将不同尺度的对齐特征送入并行的分类支路和回归支路进行预测;构建具有角度周期约束的方向敏感回归损失函数,对回归损失进行修正,获得更接近真实框的预测值,进而构建网络优化的总体损失,训练基于深度学习的遥感图像目标检测网络。本发明通过利用底层特征富含的细粒度信息“自底向上”地增强上层特征,提高了定位准确度。
技术领域
本发明涉及目标检测、计算机视觉领域,尤其涉及一种基于深度学习的遥感图像目标检测方法。
背景技术
随着遥感平台和传感器技术的不断进步发展,利用星载、机载等载荷平台可以获得大量高空间分辨率的遥感图像。遥感图像富含丰富的空间及地面信息,是对地探测的重要数据来源,被广泛应用于军用和民用领域。光学遥感图像中的目标检测旨在分类和定位给定航空或卫星图像中包含的一个或多个感兴趣目标,其检测结果通常由包含检测目标的检测框和该目标的类别判断得分组成。
由于视点变化、背景复杂、光照、阴影等因素的影响,区别于自然图像,遥感图像具备目标体积较小、分布密集、角度多变,以及背景与目标之间的区分度较小的特点,增加了遥感图像目标检测的难度。由于遥感图像俯视拍摄的特殊性,在检测目标时需要额外关注目标的方向信息,这使得自然图像目标检测难以有效地适用于遥感图像。
传统的遥感图像目标检测方法通过提取手工设计特征来对图像进行检测框预测。例如,Li等人提出了一种基于脊波变换和修正的平行光束拉东变换的直路边缘检测方法。但是这类方法所采用的特征无法表达目标的抽象语义特征,导致其检测性能受到限制。近年来,人们开始关注基于深度学习的目标检测方法。这类方法的基本步骤为:首先提取一组能够表征目标的特征,然后使用所提特征进行类别和位置的预测。针对遥感图像中目标方向任意旋转的问题,许多方法使用旋转框代替水平框检测,以使得检测结果兼具目标的方向信息。如Ding等人设计感兴趣区域(Region of Interest,ROI)Transformer,通过全连接学习将水平RoI转化为旋转RoI。Han等人通过设计对齐卷积层缓解了旋转框预测中分类和回归的不一致问题。然而,上述方法没有充分利用细粒度信息来增强目标的位置信息,导致遥感图像目标检测的定位精度受到限制。此外,旋转角度的预测对于水平框到旋转框的转换至关重要,上述方法没有考虑到旋转角度回归的特殊性,使用与水平框检测中常用的回归损失函数来约束旋转角度的预测,易对网络角度预测造成一定程度的误导。
因此,充分利用底层特征所富含的细粒度信息,并加强对于旋转角度回归的关注在遥感图像目标检测中具有重要的研究意义。
发明内容
考虑到细粒度信息对于检测框的准确定位具有较大的帮助、以及确定旋转角度对于水平框到旋转框转换至关重要,本发明提出了一种基于深度学习的遥感图像目标检测方法,通过利用底层特征富含的细粒度信息“自底向上”地增强上层特征,进而提高定位准确度,详见下文描述:
一种基于深度学习的遥感图像目标检测方法,所述方法包括:
以遥感图像作为输入,使用特征金字塔网络提取不同尺度的特征图;
构建自底向上的细粒度增强模块,用于底层特征向上传递、与上层特征逐层融合,实现自底向上加强细粒度信息、优化目标定位;
在细粒度信息的基础上获取检测框位置的初步预测,确定初步预测框的位置;使用卷积网络搭建预测头,将不同尺度的对齐特征送入并行的分类支路和回归支路进行预测;
构建具有角度周期约束的方向敏感回归损失函数,对Smoothl1 loss回归损失进行修正,获得更接近真实框的预测值,进而构建网络优化的总体损失,训练基于深度学习的遥感图像目标检测网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津大学,未经天津大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110687924.3/2.html,转载请声明来源钻瓜专利网。