[发明专利]图像构图评估装置、信息处理装置及其方法

说明书

本发明公开了图像构图评估装置、信息处理装置及其方法。图像构图评估装置包括：区域分割单元，被配置成将图像分割成多个区域；区域属性提取单元，被配置成从每一个区域提取至少一个属性；区域关系描述单元，被配置成基于提取的属性来描述区域之间的关系；以及构图评估单元，被配置成基于提取的属性、描述的关系和至少一个预设的准则来评估图像的构图。本发明能够对更多类型的图像和/或更多类型的构图问题进行评估。

技术领域

本发明一般涉及图像处理和计算机视觉的领域，尤其涉及图像构图评估装置、信息处理装置及其方法。

背景技术

图像的质量不仅由其内容决定，而且还由其构图决定。以摄影图像作为例子。许多相片包含了人们希望拍摄的景物，但是，由于各种构图问题，它们看起来仍无吸引力。由于构图对于初学者而言太复杂，所以大多数初学者需要智能照相机来帮助他们得到较好的相片。

为了应对该情形，Fujifilm已经提出具有人体构图判断（HumanCompositionJudgment）的成像装置，其能够基于人体提取结果来判断构图是否合适。图1和图2～3分别示出Fujifilm的人体构图判断方法的示意图和流程图。如图2所示，首先，在步骤210处，基于图像中的脸部检测来提取人体对象（在图1中用实线的长方形示出人体对象提取结果）。接下来，在步骤220处，基于图像中的除人体对象提取区域之外的区域中的特殊对象检测来提取非人体对象（在图1中用多边形示出非人体对象提取结果）。最后，在步骤230处，基于对象的重心是否在图像的预定区域之内来评估布置平衡性。图3给出了布置平衡性评估步骤的更详细的流程图。如图3所示，在步骤310和320处，分别计算每个人体对象的重心和每个非人体对象的重心；然后，在步骤340处，对该重心是否在图像的预定区域之内进行判断。同时，在步骤330处，基于步骤310和320的结果来计算整个的人体及非人体对象的重心；然后，在步骤350处，对该重心是否远离图像的中心区域进行判断。最后，在步骤360处，基于步骤340和350的结果对布置平衡性是否合适进行评估。在图1所示的例子中，实线的长方形内的十字指示提取的人体对象的重心，多边形内的十字指示提取的非人体对象的重心，十字A指示整个的人体及非人体提取对象的重心，十字B指示图像中心。结果，评估得出图1所示的图像的构图并不好（即，重心A低），由此提议画面可以被变焦到图1中虚线的长方形所示的位置，以使得重心A不远离图像中心B。

然而，以上的人体构图判断方法具有许多限制。

首先，这样的方法仅能够应对具有检测到的人脸的相片。这意味着根本就不能对诸如无特殊对象的风景相片（参见图25C）、无人体的对象相片（参见图25D～25E）、以及甚至无脸部的人体背侧相片（参见图25B）的其它相片进行评估。

其次，这样的方法仅能够有助于使人体对象在图像的中心区域中，其对于良好的构图而言并不足够。例如，由于该方法不关心人体对象的比例，因此人体对象可能不显著（参见图25B）；由于该方法不关心人体对象和非人体对象之间的关系，因此人体位置可能令人不舒服（参见图25A）；由于该方法不关心背景环境，因此可能由于不成比例的背景而导致不合理的构图（参见图25D）等。

因此，希望能够提供一种新的图像构图评估装置及其方法，其能够对更多类型的图像和/或更多类型的构图问题进行评估。

发明内容

鉴于以上问题中的至少一个提出本发明。

本发明的一个目的是提供一种新的图像构图评估装置、新的信息处理装置、新的图像构图评估方法和新的信息处理方法。

本发明的另一目的是提供一种图像构图评估装置、信息处理装置、图像构图评估方法和信息处理方法，其能够评估更多类型的图像，包括无特殊对象的风景图像、无人体的对象图像、无脸部的人体背侧图像等。