[发明专利]图像处理装置、图像处理系统、图像处理方法和存储介质

权利要求书

1.一种图像处理装置，其包括：

获得单元，其被构造为，获得基于多个拍摄图像生成的物体的三维形状模型，所述多个拍摄图像是通过用于生成虚拟视点图像的多个摄像装置获得的；以及

校正单元，其被构造为，基于参考模型校正所获得的三维形状模型。

2.根据权利要求1所述的图像处理装置，其中，所述获得单元从基于所述多个拍摄图像生成的三维形状模型中，获得基于用于识别参考模型的第一信息而识别的物体的三维形状模型，作为要由所述校正单元校正的目标模型。

3.根据权利要求2所述的图像处理装置，其中，所述获得单元基于用于识别包含识别物体的拍摄图像的第二信息，来从基于包含识别物体的所述多个拍摄图像生成的三维形状模型中，获得目标模型。

4.根据权利要求2所述的图像处理装置，其中，所述校正单元：

检测目标模型的位置，并且

在目标模型的检测位置与参考模型的位置被设置为相互匹配的状态下参考模型的表面与目标模型的表面相互不匹配的情况下，校正目标模型，使得参考模型的表面表现为目标模型的表面。

5.根据权利要求2所述的图像处理装置，其中，所述校正单元：

获得校正之前的三维形状模型的形状特征，并且

在所述形状特征不满足预定标准的情况下，校正三维形状模型。

6.根据权利要求5所述的图像处理装置，其中，

所述形状特征是用于生成目标模型的所述多个拍摄图像的数量，并且

所述标准是用于生成目标模型的拍摄图像的数量为预定数量或更多的状态。

7.根据权利要求5所述的图像处理装置，其中，

所述形状特征是获得了用于生成目标模型的所述多个拍摄图像的摄像装置的光轴之间的最大角度，并且

所述标准是所述最大角度为预定值或更小的状态。

8.根据权利要求5所述的图像处理装置，其中，所述标准是三维形状模型的形状特征与参考模型的形状特征之间的差为预定值或更小的状态。

9.根据权利要求5所述的图像处理装置，其中，

所述形状特征是用于生成目标模型的所述多个拍摄图像中的识别物体的部分丢失率的总和或平均值，并且

所述标准是识别物体的部分丢失率的总和或平均值为预定值或更小的状态。

10.根据权利要求1所述的图像处理装置，所述图像处理装置还包括：

图像生成单元，其被构造为，基于校正后的三维形状模型生成虚拟视点图像。

11.根据权利要求10所述的图像处理装置，其中，所述图像生成单元：

获得指示虚拟视点的位置和方向的虚拟视点信息，

获得至少包含关于参考模型的颜色信息的第三信息，并且

基于虚拟视点信息、校正后的三维形状模型以及第三信息，生成虚拟视点图像。

12.根据权利要求11所述的图像处理装置，其中，所述图像生成单元不使用由所述校正单元校正之前的三维形状模型，而使用由所述校正单元校正的三维形状模型来生成虚拟视点图像。

13.根据权利要求11所述的图像处理装置，其中，第三信息是参考模型的多个图像和参考模型的纹理数据中的至少一者。

14.根据权利要求10所述的图像处理装置，其中，所述图像生成单元基于校正后的三维形状模型、校正之前的三维形状模型以及所述多个拍摄图像，来生成虚拟视点图像。

15.根据权利要求1所述的图像处理装置，其中，在任意拍摄图像包括具有与虚拟视点图像的构图匹配的构图的图像区域的情况下，所述图像生成单元从该拍摄图像中切出该图像区域。