[发明专利]用于识别相关媒体内容的方法和系统

说明书

通过对输入视频中的视频帧进行分析以检测视频帧中的任何一个是否包含目标产品来识别与输入视频相关的媒体内容。选择一个或者更多个被发现包含检测到的目标产品的视频帧，并且对每个选定视频帧产生产品缩略图。选择至少一个产品缩略图，并且对每个选定产品缩略图产生视频产品视觉索引。然后通过将每个选定产品缩略图的视频产品视觉索引与媒体内容数据库中的多个媒体内容视觉索引进行比较来对每个产品缩略图识别相关媒体内容。每个媒体内容视觉索引与媒体内容产品数据库中的一个媒体内容相关联。

技术领域

本发明总体上涉及一种用于识别相关媒体内容的方法和系统，更具体地涉及基于视频的视觉内容的识别。

背景技术

广告对于视频内容的提供者起重要作用。例如，就比如YouTube^TM和Hulu^TM的视频流传输网站来说，视频内容通常免费地流传输到它们的用户中的至少一些。内容提供者的收益的很大一部分因此来源于广告。即使在视频内容不是免费提供的情况下，广告收益也可以帮助补贴提供和托管视频内容的成本，从而使订阅费用保持很低。视频流传输网站的用户通常具有关闭正在播放的广告的选择，因此显示将使观看者感兴趣的广告的能力对于视频内容提供者是重要的，因为它影响他们吸引登广告者的能力，因此影响他们的收益。

目前已知的在视频播放期间识别用于显示的广告的方法是基于标准(比如用户配置文件或者行为)以及视频的元数据(比如标题和体裁)的。然而，这样的匹配方法可能不能识别用户将感兴趣的广告。类似地，在其他情况下，比如在教育背景下，还可能可取的是识别观看者将感兴趣的相关媒体内容。

发明内容

概括地说，本发明提供一种用于基于视频中显示的对象与和媒体内容(比如广告)相关联的视觉图像之间的视觉相似性来识别媒体内容的方法和系统。使相关媒体内容与视频匹配的这个机制有利地提供由于其与观看者在视频中看到的对象的视觉相似性而使用户将对其感兴趣的媒体内容。相比之下，目前已知的方法不基于视频的视觉内容来识别媒体内容，结果，可能错过用户将感兴趣的相关广告。

根据本发明的一个方面，提供了一种用于对包括多个视频帧的输入视频识别相关媒体内容的方法。所述方法包括：对所述多个视频帧中的至少一个进行分析以检测所述多个视频帧中的任何一个是否包含目标产品；选择至少一个包含检测到的目标产品的视频帧；以及对每个选定视频帧产生产品缩略图，所述产品缩略图包括检测到的目标产品。选择产品缩略图中的至少一个，并且对每个选定产品缩略图产生视频产品视觉索引。所述方法进一步包括通过将每个选定产品缩略图的视频产品视觉索引与媒体内容数据库中的多个媒体内容视觉索引进行比较来从媒体内容数据库对选定产品缩略图中的至少一个识别相关媒体内容，每个媒体内容视觉索引与媒体内容产品数据库中的一个媒体内容相关联。

根据各种实施方案，所述方法可以进一步包括基于比较使至少一个媒体内容与选定产品缩略图有相关关系(correlating)。

根据各种实施方案，所述方法可以进一步包括产生包括至少一个视频产品元数据的视频产品索引，每个视频产品元数据与选定产品缩略图中的一个相关联(associated)。

根据各种实施方案，每个视频产生元数据可以包括与选定产品缩略图有相关关系的至少一个媒体内容，所述至少一个媒体内容是可检索的以显示在视频显示器上。

根据各种实施方案，所述方法可以进一步包括对每个选定产品缩略图计算产品相关性得分，其中产品相关性得分指示与选定产品缩略图有相关关系的每个媒体内容与产品缩略图中所包括的检测到的目标产品之间的相关性程度。

根据各种实施方案，产生包括至少一个视频产品元数据的视频产品索引的步骤可以包括基于选定产品缩略图的产品相关性得分来选择所述多个选定产品缩略图中的哪个产生所述至少一个产品元数据。

根据各种实施方案，每个视频产品元数据可以进一步包括选定产品缩略图的产品相关性得分。