[发明专利]一种视频标记方法、装置及电子设备

权利要求书

1.一种视频标记方法，其特征在于，所述方法包括：

获取待标记视频对应的候选概念标签，其中，所述候选概念标签用于表示所述待标记视频内容的候选上位概念；

将所述待标记视频、所述待标记视频对应的关联文本、所述候选概念标签，输入目标标签置信度模型，确定所述候选概念标签的置信度，所述置信度用于表征所述候选概念标签为所述待标记视频的上位概念的概率，所述目标标签置信度模型用于根据所述待标记视频和所述关联文本确定所述待标记视频的多模态特征，根据所述关联文本确定所述候选概念标签的标签特征，并根据所述多模态特征与所述标签特征确定所述置信度；

根据所述置信度从所述候选概念标签中确定目标概念标签，并根据所述目标概念标签对所述待标记视频进行标记。

2.根据权利要求1所述的方法，其特征在于，所述获取待标记视频对应的候选概念标签，包括：

获取所述待标记视频的视频内容标签，所述视频内容标签用于表示所述待标记视频内容；

根据所述视频内容标签，从概念标签库中获取与所述视频内容标签匹配的候选概念标签，所述概念标签库存储有内容标签和概念标签的对应关系。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

从预设内容标签库中获取预设内容标签；

对预设词典和/或网络词条进行检索，确定与所述预设内容标签具有关联关系的概念语句；

将所述预设内容标签与所述概念语句输入目标概念匹配模型，获得所述目标概念匹配模型输出的概念语句匹配度，所述概念语句匹配度用于表征所述概念语句为所述预设内容标签的上位概念的概率；

根据所述概念语句匹配度，从所述概念语句中确定所述预设内容标签对应的候选概念标签；

根据所述预设内容标签与所述候选概念标签的对应关系，构建所述概念标签库。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

获取样本内容标签、所述样本内容标签对应的样本概念语句以及每个所述样本概念语句的语句标注信息，所述语句标注信息用于表征所述样本概念语句是或不是所述样本内容标签的上位概念；

将所述样本内容标签和所述样本概念语句的第一对应关系输入初始概念匹配模型，获得所述初始概念匹配模型输出的样本概念语句匹配度，所述样本概念语句匹配度用于表征所述样本概念语句为所述样本内容标签的上位概念的概率；

根据所述样本概念语句匹配度与所述语句标注信息确定第一损失值，并根据所述第一损失值和预设的损失函数，对所述初始概念匹配模型进行训练，得到所述目标概念匹配模型。

5.一种目标标签置信度模型生成方法，其特征在于，所述方法包括：

将样本视频和所述样本视频对应的样本候选概念标签作为训练数据输入初始标签置信度模型，得到所述初始标签置信度模型输出的所述样本候选概念标签的置信度，所述置信度用于表征所述样本候选概念标签为所述样本视频的上位概念的概率；

根据所述置信度和所述样本视频对应的标签标注信息确定第二损失值，并根据所述第二损失值和预设的损失函数，对所述初始标签置信度模型进行训练，得到如权利要求1至4中任一项权利要求所述的目标标签置信度模型，所述标签标注信息用于表征所述样本候选概念标签是或不是所述样本视频的上位概念。

6.一种视频标记装置，其特征在于，所述装置包括：

候选概念标签获取模块，被配置为获取待标记视频对应的候选概念标签，其中，所述候选概念标签用于表示所述待标记视频内容的候选上位概念；

标签置信度确定模块，被配置为将所述待标记视频、所述待标记视频对应的关联文本、所述候选概念标签，输入目标标签置信度模型，确定所述候选概念标签的置信度，所述置信度用于表征所述候选概念标签为所述待标记视频的上位概念的概率，所述目标标签置信度模型用于根据所述待标记视频和所述关联文本确定所述待标记视频的多模态特征，根据所述关联文本确定所述候选概念标签的标签特征，并根据所述多模态特征与所述标签特征确定所述置信度；

目标概念标签确定模块，被配置为根据所述置信度从所述候选概念标签中确定目标概念标签，并根据所述目标概念标签对所述待标记视频进行标记。