[发明专利]一种3D深度信息估计方法、装置及计算机设备有效

专利信息
申请号: 202110093028.4 申请日: 2021-01-25
公开(公告)号: CN112419385B 公开(公告)日: 2021-04-09
发明(设计)人: 尚进;马良慧;冉雪峰 申请(专利权)人: 国汽智控(北京)科技有限公司
主分类号: G06T7/50 分类号: G06T7/50;G06T7/73;G06T7/80;G06N3/04
代理公司: 北京三聚阳光知识产权代理有限公司 11250 代理人: 李博洋
地址: 100176 北京市大兴区北京经*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 深度 信息 估计 方法 装置 计算机 设备
【说明书】:

发明公开了一种3D深度信息估计方法、装置及计算机设备,该方法包括:获取目标行驶物体的2D检测框的尺寸信息以及目标行驶物体的行驶方向角,尺寸信息是在目标行驶物体所处图像的图像坐标系中形成的,行驶方向角是在目标行驶物体的自车坐标系中形成的,图像坐标系和自车坐标系均通过拍摄目标行驶物体的相机对应的相机坐标系标定;根据尺寸信息和目标行驶物体的行驶方向角确定目标行驶物体的3D深度信息。通过实施本发明,不需要训练3D目标检测深度学习网络,提高计算速度,而且图像坐标系和自车坐标系均通过相机坐标系标定,每次的标定过程同时考虑了相机的内参和外参,避免了当换一个相机,相机内参改变,而导致预测的深度信息不准确的问题。

技术领域

本发明涉及计算机视觉技术领域,具体涉及一种3D深度信息估计方法、装置及计算机设备。

背景技术

作为计算机视觉研究中的一个重要方向,深度信息估计的主要目标是测出图像中目标物体的深度,获取像素级别的深度图。相关技术中的深度信息估计通常为通过深度学习网络对得到的目标物体的热力图进行定位,得到目标的3D框的中心点坐标和3D框的长宽高。但是训练的深度学习网络通常都是使用固定的相机内参进行训练,例如Centernet3D,训练出来的模型只能在固定场景下使用,如果换一个相机拍摄一张照片或者录制一段视频,使用该模型预测出的深度信息是不准确的,模型适用性差。

发明内容

因此,本发明要解决的技术问题在于克服现有技术中使用固定相机内参训练得到的深度学习网络模型适用性差的缺陷,从而提供一种3D深度信息估计方法、装置及计算机设备。

根据第一方面,本发明公开了一种3D深度信息估计方法,包括如下步骤:获取目标行驶物体的2D检测框的尺寸信息以及所述目标行驶物体的行驶方向角,所述尺寸信息是在目标行驶物体所处图像的图像坐标系中形成的,所述行驶方向角是在目标行驶物体的自车坐标系中形成的,所述图像坐标系和所述自车坐标系均通过拍摄所述目标行驶物体的相机对应的相机坐标系标定;根据所述尺寸信息和所述目标行驶物体的行驶方向角确定目标行驶物体的3D深度信息。

可选地,所述获取所述目标行驶物体的行驶方向角,包括:获取所述目标行驶物体沿所述自车坐标系的目标坐标轴的第一速度分量和第二速度分量,所述目标坐标轴与所述图像坐标系的坐标轴方向相同;根据所述第一速度分量和所述第二速度分量确定所述目标行驶物体的行驶方向角。

可选地,所述方法还包括:获取待识别图像;将所述待识别图像输入到预设识别模型中进行识别,得到目标行驶物体的2D检测框的尺寸信息。

可选地,所述图像坐标系下的行驶方向角通过如下步骤确定:获取所述2D检测框中的任一地面点的第一坐标;根据预设算法对所述第一坐标进行转换,得到所述任一地面点的坐标在所述自车坐标系对应的第二坐标;在所述自车坐标系中选取第三坐标;根据所述第二坐标、所述第三坐标以及所述目标行驶物体的行驶方向角,在所述自车坐标系中选取第四坐标;根据所述预设算法对所述第三坐标、所述第四坐标进行转换,得到所述第三坐标在图像坐标系中的第五坐标和所述第四坐标在图像坐标系中的第六坐标;根据所述第一坐标、所述第五坐标以及所述第六坐标,确定所述目标行驶物体在所述图像坐标系下的行驶方向角。

可选地,所述根据所述图像坐标系下的行驶方向角以及所述尺寸信息确定所述目标行驶物体的3D深度信息,包括:

;或

其中,表示目标行驶物体的3D深度信息;表示目标行驶物体的2D检测框的尺寸信息中的长度信息;表示目标行驶物体的2D检测框的尺寸信息中的宽度信息;表示图像坐标系下的行驶方向角;n为常数,根据目标行驶物体的2D检测框的尺寸信息中的长度信息与目标行驶物体的3D长度信息确定。

可选地,所述预设算法为:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国汽智控(北京)科技有限公司,未经国汽智控(北京)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110093028.4/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top