[发明专利]图像处理设备、方法和非暂时性计算机可读存储介质

权利要求书

1.一种图像处理设备，用于输出基于通过多个照相机从不同方向获得的多个拍摄图像的虚拟视点图像，所述图像处理设备包括：

视点信息获得单元，其被配置为获得指示虚拟视点的视点位置和视点方向的视点信息；

照相机信息获得单元，其被配置为获得与所述多个照相机的安装有关的照相机信息；

确定单元，其被配置为基于所述视点信息获得单元所获得的视点信息以及所述照相机信息获得单元所获得的照相机信息，从多个图像处理方法中确定要用于基于所述多个拍摄图像生成与所述虚拟视点相对应的虚拟视点图像的图像处理方法；以及

输出单元，其被配置为输出通过使用所述确定单元所确定的图像处理方法而生成的虚拟视点图像。

2.根据权利要求1所述的图像处理设备，其中，所述照相机信息包括照相机的位置、姿势和视角中的至少一个信息。

3.根据权利要求1或2所述的图像处理设备，其中，所述确定单元基于从所述视点信息获得单元所获得的视点信息指定的虚拟视点方向与从所述照相机信息获得单元所获得的照相机信息指定的照相机摄像方向之间的关系，来确定所述图像处理方法。

4.根据权利要求3所述的图像处理设备，其中，所述确定单元确定所述图像处理方法，使得在由所述虚拟视点方向和所述照相机摄像方向形成的角度小于预定值的情况下将使用通过对拍摄图像进行投影变换来处理图像的图像处理方法，以及在该角度不小于所述预定值的情况下将使用通过使用基于多个拍摄图像的三维模型来处理图像的图像处理方法。

5.根据权利要求1或2所述的图像处理设备，其中，所述确定单元基于从所述视点信息获得单元所获得的视点信息指定的虚拟视点的视场与从所述照相机信息获得单元所获得的照相机信息指定的多个照相机的摄像范围中所包括的注视点区域之间的关系，来确定所述图像处理方法。

6.根据权利要求5所述的图像处理设备，其中，作为用于生成所述虚拟视点图像的图像处理方法，所述确定单元在所述注视点区域在所述虚拟视点的视场中所占的比率大于预定值的情况下确定使用通过使用基于多个拍摄图像的三维模型来处理图像的图像处理方法，以及在所述比率不大于所述预定值的情况下确定使用通过对拍摄图像进行投影变换来处理图像的图像处理方法。

7.根据权利要求1或2所述的图像处理设备，其中，所述确定单元基于从所述视点信息获得单元所获得的视点信息指定的虚拟视点的视场中所包括的被摄体的类型来确定所述图像处理方法。

8.根据权利要求1或2所述的图像处理设备，其中所述多个图像处理方法包括通过使用基于多个拍摄图像的三维模型来处理图像的数个图像处理方法，其中，所述数个图像处理方法的各图像处理方法中使用的所述三维模型的粗糙度不同。

9.根据权利要求1或2所述的图像处理设备，其中，所述多个图像处理方法包括通过对拍摄图像进行投影变换来处理图像的数个图像处理方法，其中，所述数个图像处理方法的各图像处理方法中使用的拍摄图像的数量不同。

10.一种图像处理设备，用于输出基于通过多个照相机从不同方向获得的多个拍摄图像的虚拟视点图像，所述图像处理设备包括：

视点信息获得单元，其被配置为获得指示虚拟视点的视点位置和视点方向的视点信息；

确定单元，其被配置为基于所述视点信息获得单元所获得的视点信息指定的虚拟视点的改变，从多个图像处理方法中确定要用于基于所述多个拍摄图像生成与所述虚拟视点相对应的虚拟视点图像的图像处理方法；以及

输出单元，其被配置为输出通过使用所述确定单元所确定的图像处理方法而生成的虚拟视点图像，

其中，所述确定单元确定在所述虚拟视点的改变与弧形运动相对应的情况下使用通过使用基于多个拍摄图像的三维模型来处理图像的图像处理方法，作为用于生成虚拟视点图像的图像处理方法。