[发明专利]视频分析的方法

说明书

技术领域

本发明涉及一种分析视频流并且生成可以传输到不同位置的元数据的方法。

背景技术

可取地分析记录的或现场流视频并且产生包含分析结果的紧凑元数据。如果要在远程位置分析元数据，那么仅仅流动这个元数据，这不太方便，因为数据量可以随着时间变大。需要一种减少元数据的量的方法。

此外，可以可取地在远程装置处进行分析，该远程装置生成与通过分析原始视频可以获得的结果可比较的结果。根据先有技术，这要求将视频流全部传输给服务器。全部传输视频，具有低效率，并且需要一种用于更有效的传输的方法。

发明内容

根据本发明的第一方面，提供了一种用于分析具有多个帧的视频流的方法，所述方法包括：

使用对象检测算法，确定存在对象的一组帧；以及

从所述视频流的内容生成至少一个对象记录，所述对象记录包括在这组帧内的对象的至少一个特征的时间演化。

这解决了在对象记录内仅仅包括所选择的元数据时减少元数据的量的问题。这便于储存、传输以及索引。

该方法优选地包括分析所述对象记录，可以在与确定一组帧并且生成至少一个对象记录相同的位置或者不同的位置执行所述分析。

本发明进一步涉及一种用于在第一位置处理具有多个帧的视频流的第一设备，所述设备包括：

至少一个处理器；以及

至少一个存储器，包括计算机程序指令；

所述至少一个存储器和所述计算机程序指令被配置为与所述至少一个处理器一起促使所述设备执行以下方法：

使用对象检测算法确定存在对象的一组帧；

从所述视频流的内容生成至少一个对象记录，所述对象记录包括在这组帧内的对象的至少一个特征的时间演化。

本发明进一步涉及一种用于在第二位置处理包括元数据的对象记录的第二设备，所述设备包括：

至少一个处理器；以及

至少一个存储器，包括计算机程序指令；

所述至少一个存储器和所述计算机程序指令被配置为与所述至少一个处理器一起促使所述设备执行以下方法：

从第一位置接收所述对象记录；

分析所述对象记录；以及

获得分析的结果。

本发明进一步涉及一种用于处理视频流的系统，包括上述第一设备和第二设备。

从参照附图进行的、仅仅通过实例提供的本发明的优选实施方式的以下描述中，本发明的进一步特征和优点显而易见。

附图说明

图1示出了用于生成元数据并且分析这个元数据的方法；

图2示出了用于由视频帧生成元数据的方法；

图3示出了在视频流中识别的对象的使用期中的各种关键点；

图4示出了响应于确定检测的对象与相同的对象对应，用于形成组合的对象记录的两个对象记录的组合；

图5a和图5b示出了实现图1的方法的两个系统。

具体实施方式

各种分析技术可以应用于储存在存储器内的遇险记录的视频中，并且还可以应用于实时视频(例如，由相机拍摄的)中。视频可以是在相机模块内的图像处理的结果，或者可以由原始数据流构成，例如，由CMOS或CCD传感器输出的原始数据流。可以分析这个视频，以产生与视频流的内容相关的数据，例如，元数据；例如，可以应用对象检测算法，以识别在视频流内存在的对象。可以在视频颅内检测对个对象，在视频流内的相同点或在不同点，并且如果这样的话，那么在本文中描述的方法可以应用于每个检测的对象中。在这种情况下，数据可以包括在视频流内的这个或这些对象的一组特征。这种特征的实例包括每个对象的标识符、在视频帧内的每个对象的位置和尺寸、对象类型(例如，“人”或“狗”)、对象的部分(例如，“头部”、“上半身”)及其取向角、描述检测的精确度的检测得分、以及每个对象的最可能的取向角的指示(例如，区分朝着相机的人脸和朝着侧边的人脸)。在该数据内可以包括其他描述数据，例如，对象颜色的直方图或其他度量，例如，每个颜色成分的平均值和标准偏差、或与图像的剪切部分对应的缩略图。这些特征中的一些特征可以在具有具体对象的时间段内变化，并且数据可以通过(例如)储存用于存在对象的这组帧的每个视频帧的或者用于所述一组帧的帧的子集的单独值来反映这个。在存在对象的一系列帧内显示规定的对象一个或多个这种特征的时间演化的数据集合可以称为“跟踪记录”或“对象记录”。为了便于第三方工具解释，例如，可以在ASCIIXML格式中编码对象记录。