[发明专利]用于三维视频的基于视觉的质量度量

摘要

一般来说，本发明描述用于针对三维(3D)视频确定基于视觉的质量度量的技术。包括3D分析单元(24、48)的装置(12、14)可实施这些技术来计算3D客观度量(36、60)。所述3D分析单元(24、48)估计将使用基于DIBR的3D视频数据(34)产生失真受限的图像视图的理想深度图(62、70)，且随后基于所述理想深度图(62、70)与在产生所述基于DIBR的3D视频数据(34)中使用的深度图(28、58)的定量比较来导出一个或一个以上失真度量(64、72)。基于所述导出的一个或一个以上失真度量(64、72)，所述3D分析单元(24、48)计算所述客观度量(36、60)以量化基于DIBR的视频数据(34)的视觉质量。所述3D客观度量(36、60)可用于更改或以其他方式调整深度估计和编码/解码参数以校正预期的视觉不适。

主权项

一种用于获得客观度量(36、60)以量化基于基于深度图像再现DIBR的三维3D视频数据的视觉质量的方法，所述方法包括：至少部分基于以下参数来估计将使用基于DIBR的3D视频数据(138、156)产生失真受限图像视图的理想深度图(62、70)：从所述基于DIBR的3D视频数据产生的视图、虚拟3D图像俘获装置的焦距和所述虚拟3D图像俘获装置的基线；基于所述理想深度图(62、70)与在产生所述基于DIBR的3D视频数据(34、140、158)中使用的深度图(28、58)的定量比较来导出一个或一个以上失真度量(64、72)；以及基于所述导出的一个或一个以上失真度量(64、142、160)来计算所述客观度量(36、60)以量化所述基于DIBR的3D视频数据的视觉质量，其中估计所述理想深度图包含根据以下等式中的一者来估计所述理想深度图：$Z_{IDEAL}=\frac{\±FB}{k(I_o-I_g)\±\frac{FB}{Z}},$其中Ig表示从所述基于DIBR的3D视频数据产生的视图，Io表示原始图像，Z表示所述基于DIBR的3D视频数据的所述深度图，F表示用于从所述基于DIBR的3D视频数据产生不同视图的虚拟3D图像俘获装置的焦距，而B表示用于从所述基于DIBR的3D视频数据产生不同视图的虚拟3D图像俘获装置的基线；$Z_{IDEAL}=\frac{\±FB}{k(I_R-I_g)\±FB(\frac{1}{Z_L}+\frac{1}{Z_R})+h},$其中I_R表示参考视图，Ig表示从所述基于DIBR的3D视频数据产生的视图，Z_L表示来自原始左眼视图的所述基于DIBR的3D视频数据的深度图，Z_R表示来自原始右眼视图的所述基于DIBR的3D视频数据的深度图，k表示第一常数，h表示第二常数，F表示用于从所述基于DIBR的3D视频数据产生额外视图的所述虚拟3D图像俘获装置的焦距，而B表示用于从所述基于DIBR的3D视频数据产生额外视图的所述虚拟3D图像俘获装置的基线；或者$Z_{IDEAL}\≈\frac{\±FB}{f(I_R,I_g)\±\frac{FB}{Z}},$其中I_R表示参考视图，Ig表示从所述基于DIBR的3D视频数据产生的视图，F表示用于从所述基于DIBR的3D视频数据产生额外视图的所述虚拟3D图像俘获装置的焦距，而B表示用于从所述基于DIBR的3D视频数据产生所述额外视图的所述虚拟3D图像俘获装置的基线，其中函数f(I_R,I_g)表示在将水平移位应用于所述参考视图I_R的每一像素块之后所述参考视图中的所述每一像素块与所述产生的视图Ig中的每一对应像素块之间的亮度上的差，其中所述水平移位的量是I_R和Ig的对应块之间的平均视差，以及其中所述平均视差随所述参考视图的深度图而变。