[发明专利]图像处理方法、障碍物检测方法、装置、介质及车辆在审

专利信息
申请号: 202110221099.8 申请日: 2021-02-26
公开(公告)号: CN112818932A 公开(公告)日: 2021-05-18
发明(设计)人: 谷硕;夏靖;侯文博;郎咸朋 申请(专利权)人: 北京车和家信息技术有限公司
主分类号: G06K9/00 分类号: G06K9/00;G06K9/62;G06N3/08;G06N3/04
代理公司: 北京英创嘉友知识产权代理事务所(普通合伙) 11447 代理人: 曹寒梅
地址: 101300 北京市顺义区高丽营*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 处理 方法 障碍物 检测 装置 介质 车辆
【权利要求书】:

1.一种图像处理方法,其特征在于,所述方法包括:

获取待处理图像;

将所述待处理图像输入至预先训练的障碍物检测模型,得到所述障碍物检测模型针对所述待处理图像输出的检测结果,其中,所述障碍物检测模型包括深度估计网络和目标检测网络;所述深度估计网络用于根据所述待处理图像得到第一输出内容,所述第一输出内容能够反映所述待处理图像的深度信息;所述目标检测网络用于根据所述第一输出内容得到所述检测结果;

根据所述检测结果,确定所述待处理图像中的障碍物信息。

2.根据权利要求1所述的方法,其特征在于,所述深度估计网络为单目深度估计网络,所述目标检测网络为基于三维边框的目标检测网络。

3.根据权利要求1所述的方法,其特征在于,所述障碍物检测模型通过以下方式获得:

获取多组训练数据,每一组所述训练数据包括样本图像序列、所述样本图像序列对应的深度信息以及所述样本图像序列对应的障碍物信息,所述样本图像序列中包括在时间上连续的多帧图像;

构建初始检测模型,所述初始检测模型包括初始深度估计网络和初始目标检测网络;

利用所述样本图像序列和所述样本图像序列对应的深度信息,对所述初始深度估计网络进行训练,以获得训练完成的深度估计网络;

根据所述样本图像序列和训练完成的深度估计网络,获得训练完成的深度估计网络针对所述样本图像序列输出的第二输出内容;

根据所述样本图像序列和所述第二输出内容,得到训练输入数据;

利用所述训练输入数据和所述样本图像序列对应的障碍物信息,对所述初始目标检测网络进行训练,以获得训练完成的目标检测网络;

根据所述训练完成的深度估计网络和所述训练完成的目标检测网络,获得所述障碍物检测模型。

4.根据权利要求3所述的方法,其特征在于,所述利用所述样本图像序列和所述样本图像序列对应的深度信息,对所述初始深度估计网络进行训练,以获得训练完成的深度估计网络,包括:

将目标样本图像序列输入至本次训练所使用的深度估计网络中,获得本次训练所使用的深度估计网络输出的第三输出内容,其中,目标样本图像序列为本次训练所使用的样本图像序列,并且,初次训练所使用的深度估计网络为所述初始深度估计网络;

根据所述第三输出内容和所述目标样本图像序列对应的深度信息,确定本次训练的第一损失值;

若不满足第一训练停止条件,利用所述第一损失值更新本次训练所使用的深度估计网络,并将更新后的深度估计网络用于下一次训练;

若满足所述第一训练停止条件,将本次训练所使用的深度估计网络作为训练完成的深度估计网络。

5.根据权利要求3所述的方法,其特征在于,所述第二输出内容为所述样本图像序列中每一帧图像对应的深度图像;

所述根据所述样本图像序列和所述第二输出内容,得到训练输入数据,包括:

分别将所述样本图像序列中的每一帧图像作为目标图像,执行如下操作,以得到训练输入数据:

将所述目标图像与所述目标图像在所述第二内容中对应的深度图像进行拼接。

6.根据权利要求3所述的方法,其特征在于,所述利用所述训练输入数据和所述样本图像序列对应的障碍物信息,对所述初始目标检测网络进行训练,以获得训练完成的目标检测网络,包括:

将目标训练输入数据输入至本次训练所使用的目标检测网络中,获得本次训练所使用的目标检测网络输出的第四输出内容,其中,目标训练输入数据为本次训练所使用的训练输入数据,并且,初次训练所使用的目标检测网络为所述初始目标检测网络;

根据所述第四输出内容和所述目标训练输入数据对应的障碍物信息,确定本次训练的第二损失值;

若不满足第二训练停止条件,利用所述第二损失值更新本次训练所使用的目标检测网络,并将更新后的目标检测网络用于下一次训练;

若满足所述第二训练停止条件,将本次训练所使用的目标检测网络作为训练完成的目标检测网络。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京车和家信息技术有限公司,未经北京车和家信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110221099.8/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top