[发明专利]图像处理装置、显示装置、图像发送装置、图像处理方法、控制程序以及记录介质

说明书

在图像处理装置(2、11、21、31)中，获取部(4)获取部分地表示显示对象的三维形状的、与规定顺序中的次序建立关联的多个部分3D模型数据，生成部(6)按照与所述部分3D模型数据建立关联的所述次序，参考该部分3D模型数据来更新所述参考模型。

技术领域

本发明的一个方案主要涉及一种对来自再现视点的表示显示对象的图像进行合成的图像处理装置。

背景技术

通常，作为用于实现能够选择再现视点(影像再现时的视点)影像服务的系统的示例，可以举出利用了图像和深度的系统。例如，作为该系统的具体例，可以举出基于深度图像渲染(Depth Image-based Rendering：DIBR)。

以下，对DIBR进行说明。首先，接收来自特定视点的表示显示对象的图像数据以及从该视点到该显示对象的深度。接着，根据再现视点对接收到的深度的视点进行转换，合成再现视点深度。接着，基于再现视点、合成的再现视点深度以及接收到的图像数据合成再现视点图像。

作为表示具有上述那样的构成的DIBR的示例的文献，举出专利文献1。

现有技术文献

专利文献

专利文献1：日本公开专利公报“日本特开2015-87851号公报(2015年5月7日公开)”

发明内容

发明要解决的问题

在所述的DIBR中，基于接收数据(影像+深度)来合成并提示指定的再现视点的再现图像。但是，由于频带的限制，在各时刻能够接收的显示对象的深度等3D模型数据(表示显示对象的三维形状的信息)在采样数量方面或者噪声或空穴(hole)等的精度方面受到限制，因此存在合成后的图像的质量低的问题。

本发明是鉴于上述的问题点而完成的，其目的在于，提供一种在基于图像数据和3D模型数据来合成再现视点图像的图像处理装置中，能防止因3D模型数据的采样数量或精度引起的再现视点图像的质量降低，并且能合成高质量的再现视点图像的技术。

技术方案

为了解决上述的问题，本发明的一个方案的图像处理装置具备：获取部，获取部分地表示显示对象的三维形状的、与规定顺序中的次序建立关联的多个部分3D模型数据；生成部，参考所述多个部分3D模型数据，生成参考模型；以及合成部，参考所述参考模型，合成来自再现视点的表示所述显示对象的再现视点图像，其中，所述生成部按照与所述部分3D模型数据建立关联的所述次序，参考该部分3D模型数据来更新所述参考模型。

为了解决上述的问题，本发明的一个方案的图像处理装置具备：获取部，获取显示对象的图像数据和部分地表示该显示对象的三维形状的、与规定顺序中的次序建立关联的多个部分3D模型数据；生成部，参考所述多个部分3D模型数据，生成参考模型；合成部，参考所述图像数据和所示多个部分3D模型数据，合成来自再现视点的表示所述显示对象的再现视点图像；以及校正部，参考所述参考模型，对所述再现视点图像进行图像补充或滤波处理，其中，所述生成部按照与所述部分3D模型数据建立关联的所述次序，参考该部分3D模型数据来更新所述参考模型。

为了解决上述的问题，本发明的一个方案的图像处理装置具备：获取部，获取显示对象的图像数据；推定部，参考所述图像数据，推定部分地表示所述显示对象的三维形状的多个部分3D模型数据；生成部，参考所述多个部分3D模型数据，生成参考模型；以及合成部，参考所述图像数据和所述参考模型，合成来自再现视点的表示所述显示对象的再现视点图像，其中，每当所述推定部推定所述部分3D模型数据时，所述生成部参考该部分3D模型数据来更新所述参考模型。

为了解决上述的问题，本发明的一个方案的图像发送装置具备发送部，所述发送部发送部分地表示显示对象的三维形状的、与规定顺序中的次序建立关联的多个部分3D模型数据。