[发明专利]一种图像深度信息生成方法、设备及存储介质在审
申请号: | 202110210092.6 | 申请日: | 2021-02-24 |
公开(公告)号: | CN112927279A | 公开(公告)日: | 2021-06-08 |
发明(设计)人: | 向杰;王云;安利峰 | 申请(专利权)人: | 中国科学院微电子研究所 |
主分类号: | G06T7/521 | 分类号: | G06T7/521;G06T7/73;G06N3/04;G06N3/08 |
代理公司: | 北京知迪知识产权代理有限公司 11628 | 代理人: | 王胜利 |
地址: | 100029 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 深度 信息 生成 方法 设备 存储 介质 | ||
1.一种图像深度信息生成方法,其特征在于,包括:
获取待测图像;
根据单目深度估计模型对所述待测图像进行处理,确定深度信息;其中,所述单目深度估计模型为基于双目图像对训练的模型,所述单目深度估计模型的目标函数至少由所述双目图像对的校正重投影误差确定,所述校正重投影误差为滤除不准确像素的重投影误差。
2.根据权利要求1所述的方法,其特征在于,所述单目深度估计模型的目标函数为最小化的目标函数,所述目标函数的最小化方式为梯度下降方式。
3.根据权利要求1所述的方法,其特征在于,所述双目图像对包括目标图像和源图像,滤除所述不准确像素前,所述双目图像对的重投影误差由合成图像与目标图像之间的L1误差和结构相似性确定,所述合成图像由目标图像的深度图和所述源图像确定;为所述重投影误差,所述重投影误差满足:
其中,表征所述L1误差,表征所述结构相似性;其中,θ取经验值,为合成图像的像素值,i为第i张合成图像,It为目标图像的像素值。
4.根据权利要求1所述的方法,其特征在于,所述校正重投影误差为利用图像掩膜滤除不准确像素的重投影误差;所述图像掩膜包括H行元素,所述图像掩膜的第v行元素满足:
其中,Mv为所述图像掩膜的第v行元素,为目标图像重投影到源图像上后的第v行像素的横坐标向量,0≤v≤H-1,为对进行排序得到向量,所述单目深度估计模型的输入图片分辨率的宽为W,长为H。
5.根据权利要求1所述的方法,其特征在于,所述单目深度估计模型的目标函数由所述双目图像对的校正重投影误差和双目图像对的平滑性损失确定。
6.根据权利要求1所述的方法,其特征在于,所述单目深度估计模型的目标函数为,满足:
其中,n为所述单目深度估计模型根据所述双目图像对输出的不同分辨率的深度图的张数,所述单目深度估计模型的输入图片分辨率的宽为W,长为H;
M为所述图像掩膜矩阵,所述图像掩膜包括H行元素,所述图像掩膜的第v行元素满足:
其中,Mv为所述图像掩膜的第v行元素,为目标图像重投影到源图像上后的第v行像素的横坐标向量,为对进行排序得到向量;
为所述重投影误差,所述重投影误差满足:
其中,表征所述L1误差,表征所述结构相似性;其中,θ取经验值,为合成图像的像素值,i为第i张合成图像,It为目标图像的像素值;
Ls(It,D0i)为平滑性损失,所述平滑性损失满足:
其中,D0i(i=0,1,…,n-1)为所述单目深度估计模型根据所述双目图像对生成的深度图的像素值,0≤u≤W-1,0≤v≤H-1,γ是加权系数,取经验值。
7.根据权利要求1所述的方法,其特征在于,所述根据单目深度估计模型对所述待测图像进行处理,确定深度图后,所述方法还包括:
对所述深度图进行缩放,使得缩放后的所述深度图的分辨率与相机的分辨率相同。
8.一种图像处理设备,其特征在于,包括:图形处理器以及与图形处理器耦合的通信接口;所述图形处理器用于运行计算机程序或指令,以实现如权利要求1至7任一项所述的图像深度信息生成方法。
9.一种计算机存储介质,其特征在于,所述计算机存储介质中存储有指令,当所述指令被运行时,实现权利要求1至7任一项所述的图像深度信息生成方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院微电子研究所,未经中国科学院微电子研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110210092.6/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置