[发明专利]一种架空输电线路巡检机器人障碍物检测方法有效

专利信息
申请号: 202110601511.9 申请日: 2021-05-31
公开(公告)号: CN113409252B 公开(公告)日: 2022-08-26
发明(设计)人: 蒋轩;张斌;黄国方;薛栋良;侯建国;温祥青 申请(专利权)人: 国电南瑞科技股份有限公司;国网电力科学研究院有限公司;南瑞集团有限公司
主分类号: G06T7/00 分类号: G06T7/00;G06T7/11;G06T7/13;G06T7/194;G06K9/62;G06V10/762;G06V10/80;G06V10/82;G06N3/04;G06N3/08
代理公司: 南京纵横知识产权代理有限公司 32224 代理人: 范青青
地址: 211100 江*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 架空 输电 线路 巡检 机器人 障碍物 检测 方法
【权利要求书】:

1.一种架空输电线路巡检机器人障碍物检测方法,其特征在于,包括如下步骤:

采集机器人行走地线上的视频信息;

根据视频信息,基于机器人行走地线的轮廓特征对机器人行走地线上有无障碍物进行预判;

若机器人行走地线上有障碍物,则将预判存在有障碍物的图像输入至训练好的卷积神经网络模型中,以获取障碍物类别、障碍物目标框位置、以及障碍物目标框置信度;

根据障碍物位置测算障碍物与机器人的距离,将障碍物类别及障碍物与机器人的距离作为检测结果输出;

对机器人行走地线上有无障碍物进行预判的方法包括:

定位图像中机器人行走地线所在区域;

对机器人行走地线所在区域进行区域分割,提取机器人行走地线轮廓;

若机器人行走地线轮廓发生突变,则判断机器人行走地线上有障碍物;否则,进一步对机器人行走地线轮廓进行形态分析,若机器人行走地线轮廓形态不完整,则判断机器人行走地线上有障碍物。

2.根据权利要求1所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,定位图像中机器人行走地线所在区域的方法包括:

从视频信息中提取包含机器人行走地线的单帧原始图像;

对所提取的单帧原始图像进行高斯滤波及灰度转换,获取相应的灰度图;

对所述灰度图进行边缘检测,获取边缘图像;

通过概率霍夫变换直线检测算法提取边缘图像中的直线;

对检测到的所有直线进行基于斜率的聚类,获得聚集的平行线群,用于定位机器人行走地线所在区域。

3.根据权利要求2所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,对机器人行走地线所在区域进行区域分割的方法包括:使用OTSU最大类间方差法对所述灰度图进行前背景分割;

基于像素深度信息阈值过滤背景像素点,生成只保留前景的二值图像;

对二值图像进行形态学开操作,以分离粘连的区域。

4.根据权利要求1所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,判断机器人行走地线轮廓发生突变的方法包括:

根据机器人行走地线轮廓生成机器人行走地线轮廓凸包;

对机器人行走地线轮廓凸包进行凸缺陷检测,若存在超过设定阈值的凸缺陷,则判断机器人行走地线轮廓发生突变。

5.根据权利要求1所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,所述卷积神经网络模型包括:分组卷积层、融合卷积模块以及批量归一化层,且所述分组卷积层、所述融合卷积模块以及所述批量归一化层交替组合。

6.根据权利要求5所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,所述卷积神经网络模型包括8个单独的分组卷积层和3个融合卷积模块,每个融合卷积模块包含4个分组卷积层。

7.根据权利要求6所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,所述卷积神经网络模型的训练方法包括:

将所述卷积神经网络模型最后两层分组卷积层替换为全局均值池化层接上全连接层和softmax层构成一个分类模型,使用公共数据集训练该分类模型,训练完成后冻结特征提取层的参数作为所述卷积神经网络模型的主干网络初始参数;

使用标注好的线路障碍物数据集对所述卷积神经网络模型进行微调。

8.根据权利要求5所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,所述融合卷积模块通过1×1的卷积核,基于N个通道的特征图输入,输出两个拥有N/2个通道的特征图分支;其中一个分支使用一层3×3分组卷积,另一分支使用两层3×3分组卷积;两个分支的输出结果通过合并操作,生成N个通道的特征图。

9.根据权利要求1所述的架空输电线路巡检机器人障碍物检测方法,其特征在于,测算障碍物与机器人的距离的方法包括:将图像中包含障碍物的边框作为目标框,对目标框内像素进行基于像素深度的聚类,实现障碍物区域像素级分割;

去除机器人行走地线所在区域的像素点,求剩余像素的最小值,获得障碍物到视频采集传感器的距离;将障碍物到视频采集传感器的距离转换为障碍物到机器人前行走轮的距离。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国电南瑞科技股份有限公司;国网电力科学研究院有限公司;南瑞集团有限公司,未经国电南瑞科技股份有限公司;国网电力科学研究院有限公司;南瑞集团有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110601511.9/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top