[发明专利]基于半监督的跨媒体特征学习检索方法

摘要

本发明提供一种基于半监督的跨媒体特征学习检索方法，包括如下步骤：步骤一：建立多媒体数据库，步骤二：求取不同媒体类型的投影矩阵；(2.1)定义目标函数：(2.2)目标函数的优化：(2.3)将多媒体数据的原始特征投影到公共空间，步骤三：进行跨媒体检索；(3.1)提取用户提交的媒体数据的特征：根据用户提交的数据的媒体类型使用提前训练的模型来提取出该数据的特征，(3.2)将该媒体数据的特征向量，投影到共同空间中(3.3)计算投影后的特征向量与共同空间中的其他向量之间的相似度，(3.4)返回相似度最大的前k个媒体数据。本发明的方法降低计算复杂度，实现对噪声的鲁棒性，提高检索的准确性。

主权项

1.一种基于半监督的跨媒体特征学习检索方法，包括如下步骤：步骤一：建立多媒体数据库，步骤二：求取不同媒体类型的投影矩阵；(2.1)定义目标函数：投影矩阵Xap和Xaq表示来自第p个媒体和第q个媒体的具有相同标签的两组媒体对象，Xp表示来自第p个媒体的媒体对象，Hp和Hq表示Xp和Xq的投影矩阵，Yp表示Xp对应的标签信息，F表示Frobenius范数，(2.2)目标函数的优化：让表示式(5)中的目标函数，对进行微分，并设置其值为零，可以得到如下的等式：其中，R_p＝Diag(r_p)中的r_p表示l_2,1范数的一个辅助向量，它的第i个成员定义为式(6)可以重写为:通过求解上述线性系统问题，得到一种最小化目标函数(5)的优化方法，这个方法的过程是先初始化H_p为单位矩阵，然后在每一次迭代中，在已给定的条件下计算在优化的过程中，迭代一直持续直到收敛，(2.3)将多媒体数据的原始特征投影到公共空间，步骤三：进行跨媒体检索；(3.1)提取用户提交的媒体数据的特征：根据用户提交的数据的媒体类型使用提前训练的模型来提取出该数据的特征，(3.2)将该媒体数据的特征向量投影到共同空间中，且投影后的特征向量为(3.3)计算投影后的特征向量与共同空间中的其他向量之间的相似度：跨媒体相似度被定义为边际概率，定义如下：其中，y_i(y_j)代表的标签，p(y_i＝l|f_i^p)代表f_i^p属于类别l的概率，p(y_i＝l|f_i^p)定义如下：其中，Nk(fip)代表在训练集中fip的K近邻，y代表f的标签，σ(z)＝(1+exp(‑z))‑1是Sigmoid函数，投影后的特征向量与共同空间中的其他向量之间的相似度计算完成后，用排序函数按相似度值降序排序，并对该结果进行保存，(3.4)返回相似度最大的前k个媒体数据。