[发明专利]指纹生成方法、装置、服务器及存储介质

权利要求书

1.一种指纹生成方法，其特征在于，所述方法包括：

基于多媒体资源中的至少两个模态的数据，获取至少两个模态的资源特征，所述多媒体资源包括文本、图像和视频中至少两个模态的数据；

基于所述至少两个模态的资源特征，获取所述至少两个模态的资源集合，每个所述模态的资源集合包括与对应模态的资源特征匹配的历史多媒体资源；

基于所述多媒体资源的所述至少两个模态的资源特征，确定最小多模态融合距离，所述最小多模态融合距离对应于所述至少两个模态的资源集合中在各个模态上与所述多媒体资源之间的综合匹配程度最大的历史多媒体资源；

在所述最小多模态融合距离大于所述距离阈值的情况下，将所述多媒体资源的初始多模态指纹，确定为所述多媒体资源的多模态指纹，所述初始多模态指纹基于多媒体资源库中已存储的多模态指纹确定。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在所述最小多模态融合距离小于或等于距离阈值的情况下，将所述最小多模态融合距离对应的历史多媒体资源的多模态指纹，确定为所述多媒体资源的多模态指纹。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

基于所述多媒体资源库中已存储的多模态指纹的数量，确定所述初始多模态指纹；或，

基于所述多媒体资源库中所存储的最大多模态指纹，确定所述初始多模态指纹。

4.根据权利要求1所述的方法，其特征在于，所述基于多媒体资源中的至少两个模态的数据，获取至少两个模态的资源特征包括：

基于所述至少两个模态的数据，调用对应模态的特征提取网络进行特征提取，得到所述至少两个模态的资源特征。

5.根据权利要求1所述的方法，其特征在于，所述基于所述至少两个模态的资源特征，获取所述至少两个模态的资源集合包括：

对于所述至少两个模态的资源特征中任一个模态的资源特征，基于所述资源特征和任一个历史多媒体资源的所述资源特征进行对比，若两个资源特征之间的相似度满足相似度条件，则确定所述历史多媒体资源与所述多媒体资源匹配，将所述历史多媒体资源放入所述模态的资源集合。

6.根据权利要求1所述的方法，其特征在于，所述基于所述多媒体资源的所述至少两个模态的资源特征，确定最小多模态融合距离包括：

确定所述多媒体资源和每个资源集合中的每个历史多媒体资源之间的多模态融合距离，每个所述多模态融合距离用于表示所述多媒体资源和集合中对应历史多媒体资源在各个模态上的综合匹配程度；

确定多个所述多模态融合距离中的最小多模态融合距离。

7.根据权利要求6所述的方法，其特征在于，确定所述多媒体资源和每个资源集合中的每个历史多媒体资源之间的多模态融合距离包括：

确定每个所述历史多媒体资源和所述多媒体资源之间的文本相似度、图片相似度以及视频相似度；

分别对每个所述历史多媒体资源的所述文本相似度、图片相似度以及视频相似度进行加权求和，得到每个所述历史多媒体资源的多模态融合距离。

8.一种指纹生成装置，其特征在于，所述装置包括：

特征获取模块，用于基于多媒体资源中的至少两个模态的数据，获取至少两个模态的资源特征，所述多媒体资源包括文本、图像和视频中至少两个模态的数据；

集合获取模块，用于基于所述至少两个模态的资源特征，获取所述至少两个模态的资源集合，每个所述模态的资源集合包括与对应模态的资源特征匹配的历史多媒体资源；

距离确定模块，用于基于所述多媒体资源的所述至少两个模态的资源特征，确定最小多模态融合距离，所述最小多模态融合距离对应于所述至少两个模态的资源集合中在各个模态上与所述多媒体资源之间的综合匹配程度最大的历史多媒体资源；

第一指纹确定模块，用于在所述最小多模态融合距离大于所述距离阈值的情况下，将所述多媒体资源的初始多模态指纹，确定为所述多媒体资源的多模态指纹，所述初始多模态指纹基于多媒体资源库中已存储的多模态指纹确定。