[发明专利]图像处理装置、图像捕获装置、图像处理方法及记录媒介

说明书

技术领域

本发明涉及一种图像处理装置、图像捕获装置、图像处理方法以 及图像处理程序，并且尤其是涉及一种用于存储最佳拍摄图像的技术。

背景技术

在现有技术中提出了一种脸部图像处理方法。该方法包括：连续 地输入包括有脸部图像的人的图像、从该图像判断对象脸部的状态(例 如瞳孔的状态)、并且自动选择包括有与用户期望相匹配的适当脸部 图像(日本专利申请特开No.2000—259833)。该方法可，例如通过 在某个时间长度将照相机指向对象而获得包括其中对象睁开眼睛的适 当脸部图像的图像。

在现有技术中还提出了一种图像处理装置。所提粗的图像处理装 置找到包含在输入图像之中的脸部的预定局部(与眼、嘴、以及鼻子 相对应)中的特征点，并且找到预定局部的特征量(例如眼睛(特性 点)的终端与嘴的终端(特性点)之间的距离)。图像处理装置还找 到包含预定脸部表情的脸的另一图像中的预定局部的特征量。图像处 理装置进一步计算对于每个预定局部而言输入图像的特征量与其他图 像的特征量之间的差，并且根据该差来计算用于每个预定局部的分数。 通过将为输入图像所计算的分数的分布与为各种脸部表情的脸中的预 定局部所计算的分数的已知分布进行比较，图像处理装置判断在输入 图像的脸上是哪种脸部表情(日本专利申请特开No.2005—56388)。

此外，根据日本专利申请特开No.2005—56388的图像捕获装置， 当用户希望捕获包括有期望脸部表情(诸如笑)的图像时，捕获包括 该脸部的时间序列图像，并且将为每个图像所计算的分数的分布与为 笑脸中的预定局部所计算的分数的分布进行比较。通过仅存储具有最 接近笑脸分布的分布的图像，图像捕获设备可存储包括期望表情的图 像。

发明内容

然而，日本专利申请特开No.2000—259833的发明的问题在于因 为判断连续输入图像的每个图像是否包括用户期望的适当脸部图像 (例如其中对象眼睛睁开的图像)，因此需要大量图像处理。

另外，日本专利申请特开No.2005—56388的发明也具有相似问 题，该问题在于因为图像处理装置判断图像序列的每个图像中的脸部 表情，因此需要大量图像处理。

此外，日本专利申请特开No.2000—259833和No.2005—56388 均具有进一步的问题，该问题在于如果连续地输入包含适当脸部图像 或者期望表情的脸部图像的图像，那么存储所有输入图像(例如包含 具有相同表情的脸部的同样图像)，并且无用地消耗了存储媒介的存 储器容量。

在考虑了上述问题之后构思了本发明并且目的是提供一种能够从 连续捕获的图像中仅存储用户希望存储的图像(以下称为＂最佳拍摄图 像＂)并且能够有效地提取最佳拍摄图像的图像处理装置、图像捕获装 置、图像处理方法、以及图像处理程序。

为了实现该目的，根据本发明第一方面的图像处理装置包括：图 像获取设备，其用于顺序地获取按照连续方式所捕获的图像；脸部检 测设备，其用于对所获取的图像中的脸部进行检测；表情变化量计算 设备，其用于对每个目标帧计算表情变化量，该表情变化量表示在当 前目标帧的图像中所检测到的脸部与在之前目标帧的图像中所检测到 的脸部之间的表情变化，目标帧是获取帧中的每个或者是获取帧中规 则间隔的帧；提取设备，其用于提取所计算的表情变化量大于或等于 预定值的目标帧的图像；以及存储设备，其用于将所提取的目标帧的 图像或者位于所提取的目标帧附近的帧的图像存储在存储媒介中。

因此，从按照连续方式所捕获的图像当中提取具有大脸部表情变 化的脸部的目标帧的图像，并且将所提取的目标帧的图像或者位于所 提取的目标帧附近的帧的图像存储在存储媒介中。

应该注意的是存在大脸部表情变化的脸部很有可能是期望的图像 (即，用户希望存储的脸的图像(最佳拍摄))。此外，对两个图像 之间的表情变化量进行计算所需的图像处理负荷低于对脸部表情本身 进行分析所需的图像处理负荷。此外，当在连续图像中捕获表情不变 的脸部时，不存储包含这种脸部的图像。因此，可避免浪费使用存储 媒介上的存储器容量。