[发明专利]提取色彩

说明书

技术领域

本发明涉及处理图像信号的方法和系统。

背景技术

人们通常观看电视并参与包括可视内容的诸如观看DVD的其他活动。用户对于观看这样的视频内容的体验将在未来改变。第一迹象例如在Philip(飞利浦)的电视产品中已是看得见的，其中添加灯来增强观看电视的体验。这种增加更多的设备和附加的功能来增强诸如观看电影之类的娱乐体验的过程正在增长。风险投资企业(venture)“amBX”(例如，参见www.ambx.com)正在准备接下来的步骤，以便通过与原始的音频/可视内容一起播放脚本(script)来甚至进一步增强诸如观看电视的体验，其中脚本包含能够使用合适的增强系统给用户提供的效果描述。用户的娱乐空间中附加的设备给视频内容提供了强化作用。

例如，美国专利申请公开US2002169817披露了真实世界表现系统，其包括一组设备，每个设备被安排为提供一个或多个真实世界参数，例如音频和视觉特性。至少一个设备被安排为以标记语言的指令集合的形式来接收真实世界描述，并且根据该描述来操作这些设备。以该语言表述的普通项(通用术语)由本地服务器或分布式浏览器来解释，以便操作这些设备来向用户再现真实世界体验。这样，传送用于与传送原始内容的电视一起来控制其他设备的脚本。

然而，需要创作将用于在附加设备中产生附加效果的脚本。为了辅助该创作过程，许多应用(程序)使用内容分析来自动化否则将不得不人工完成的处理。对于例如amBX脚本制作的内容创建，受过良好训练的创作者逐帧仔细检查电影(影片)并选择他们希望启动/停止诸如一个或多个灯的显示的附加效果的特定帧。这些照明效果具有创作者使之适合于视频序列中的某物(背景，爆炸，目标)的色彩。

内容分析能够为脚本创作者提供极大的益处。例如，镜头切换(shot cut)能够自动地被检测，这及时给创作者提供了其中这些灯有可能被改变的位置。对于镜头中的每个帧或抽样的帧的选择，能够提取主色(dominant color)，从中能够推荐将与特定的镜头或时间间隔中的色彩相匹配的一组色彩。后者的一个示例可以是MPEG 7主色描述符，这为帧给出了高达8种色彩。也可以使用用于选择色彩的其他方法，例如，直方图。这些主色给创作者提供非常好的建议，尤其具有高发生率的那些建议。然而，时常，不是如此明显的色彩可以是非常显著的且能够用于创建令观看者大为惊奇的效果。然而，当前不可能检测到这些令人感兴趣的色彩来给脚本创作者建议这些色彩。

发明内容

因此，本发明的目的是改善现有技术。

根据本发明的第一方面，提供一种处理图像信号的方法，包括：接收包括一系列的帧的图像信号；对于该系列的帧，计算多个主色；选择该图像信号的帧的子集；对于该子集的帧，计算多个主色；将该子集的帧的主色与该系列的帧的主色进行比较；和确定与该系列的帧中的最接近主色具有最大差的该子集的帧中的主色。

根据本发明的第二方面，提供一种用于处理图像信号的系统，包括：接收器，用于接收包括一系列的帧的图像信号；和处理器，用于：对于该系列的帧，计算多个主色；选择该图像信号的帧的子集；对于该子集的帧，计算多个主色；将该子集的帧的主色与该系列的帧的主色进行比较；和确定与该系列的帧中的最接近主色具有最大差的该子集的帧中的主色。

根据本发明的第三方面，提供在计算机可读媒体上的计算机程序产品，用于处理图像信号，该产品包括指令，用于：接收包括一系列的帧的图像信号；对于该系列的帧，计算多个主色；选择该图像信号的帧的子集；对于该子集的帧，计算多个主色；将该子集的帧的主色与该系列的帧的主色进行比较；和确定与该系列的帧中的最接近主色具有最大差的该子集的帧中的主色。

归功于本发明，有可能自动地从图像信号中提取创作者感兴趣的一序列的色彩，同时超出最主要色彩的明显选择。该方法和系统为给定时间间隔的视频序列提供在那个间隔中的帧的色彩与整个视频序列的色彩之间的比较，并找到在该时间间隔中与整个序列中的主色最不同的一种或多种色彩。这些色彩是值得注意(显著)的色彩，并且这些色彩与该序列的主色越是不同，则这些色彩对于内容创作者例如在amBX脚本创作中创建令人惊异的效果就越是令人感兴趣的。

在一个实施例中，该图像信号进一步包括包含彩色信息的数据，并且计算多个主色的步骤包括访问该数据。这通过使用例如以MPEG7彩色信息的形式存在于该图像信号中的元数据提供了这些色彩的处理的自动化。对此的备选方案是：计算多个主色的步骤包括执行这些帧的彩色含量的分析。存在各种方法来例如通过使用各个色彩的像素计数从图像帧中提取(一种或多种)色彩。