[发明专利]媒体视听信息流监测监管数据样本及其标注方法

权利要求书

1.一种媒体视听信息流监测监管数据样本，其特征在于：所述样本格式定义为：

镜头序列前缀以及依次排列在镜头序列前缀后的多个镜头数据，任一个镜头的格式包括镜头前缀以及依次设置在镜头前缀后面的多个关键帧序列；其中，镜头序列前缀包括镜头数量、帧数、镜头数据属性，镜头前缀包括序列号、时间轴坐标、帧数、镜头属性、镜头内容描述。

2.根据权利要求1所述的媒体视听信息流监测监管数据样本，其特征在于：镜头数据属性包括时间、内容、名称、节目流出处、有关内容监测报告。

3.根据权利要求1所述的媒体视听信息流监测监管数据样本，其特征在于：镜头属性包括颜色空间坐标矢量、亮度分布矢量、几何特征点矢量。

4.根据权利要求1所述的媒体视听信息流监测监管数据样本，其特征在于：镜头内容描述包括语音转文本关键词、画面文字提取识别的关键词、人工输入关键词。

5.根据权利要求1所述的媒体视听信息流监测监管数据样本，其特征在于：关键帧可以是初始TS流中的I帧、也可以是每间隔一段时间后的抽帧；存储格式为静止图像格式。

6.基于权利要求1至5中任一项所述媒体视听信息流监测监管数据样本的标注方法，其特征在于：包括如下步骤：

步骤1、计算每帧图像的图像属性特征，首先计算颜色类属性，构成颜色矢量并对其进行标注，然后，计算SIFT_Sobel特征点属性，构成SIFT_Sobel特征矢量并进行标注；

步骤2、镜头聚类分析计算，将一段视听信息媒体流分割成镜头序列；

步骤3、对镜头序列中的每一个镜头进行标注。

7.根据权利要求6所述的媒体视听信息流监测监管数据样本的标注方法，其特征在于：步骤1中计算颜色类属性，构成颜色矢量并对其进行标注的具体过程如下：

步骤a、在一帧图像内选择％65左右像素点构成集合，在颜色域内对该集合的像素点进行颜色聚类运算；

步骤b、引入类别数的限制参数C1，引入每个颜色类最少个数的限制参数C2，按最近邻颜色距离规则聚类每一像素点；按最近邻颜色类规则合并颜色类，使得帧内颜色聚类的类别数为C1或小于C1；

步骤c、计算每个颜色类的中心坐标、计算每个颜色类的半径、统计每个颜色类的像素点个数，构成颜色矢量及其标注。

8.根据权利要求6所述的媒体视听信息流监测监管数据样本的标注方法，其特征在于：步骤1中计算SIFT_Sobel特征点属性，构成SIFT_Sobel特征矢量并进行标注的具体过程如下：

步骤A、利用基于高斯微分函数来提取图像中不变的特征点，即SIFT特征点；

步骤B、利用高斯平滑和微分求导来计算图像中灰度近似边缘的特征点，即Soble特征点；

步骤C、采用FPGA实现的SIFT_Sobel算子，提取每一帧图像的SIFT_Sobel特征点；

步骤D、将步骤C中的特征点按坐标排序按最近邻规则取Count个点；

步骤E、以步骤D中的Count个点为中心、按窗口W x W、计算亮度平均值，构成SIFT_Sobel特征矢量及其标注。

9.根据权利要求6所述的媒体视听信息流监测监管数据样本的标注方法，其特征在于：步骤2中镜头聚类分析计算的具体过程如下：

步骤2.1、根据理论模型和统计经验，建立基于颜色矢量、SIFT_Sobel特征点及亮度分布的图像相似度估计模型；

步骤2.2、将每一帧图像的特征进行聚类分析计算，将一段视听信息媒体流分割成镜头序列。

10.根据权利要求6所述的媒体视听信息流监测监管数据样本的标注方法，其特征在于：步骤3中每一个镜头的组成包括：

序列号、时间轴坐标、帧数、图像属性数据表、镜头内容描述；其中，图像属性数据表包括颜色坐标、亮度分布、几何特征，镜头内容描述包括语音转文本关键词、画面文字提取识别的关键词、人工输入关键词。