[发明专利]基于跨媒体分析的科技数据检索技术

权利要求书

1.一种用于跨媒体分析的科技数据检索的方法，其特征在于，包括以下步骤：

1)给定一个n个样本的多媒文档用DNN提取图像特征V＝[v₁,v₁,.....v_n]∈R^n×p，文本特征T＝[t₁,t₁,.....t_n]∈R^n×q，求解目标函数

2)计算关于文本的类内散度W_p和W_q；

3)初始化投影矩阵X⁽⁰⁾和Y⁽⁰⁾，并设i＝0,j＝0；

4)设value1＝D(X⁽⁰⁾,Y⁽⁰⁾)；

5)根据下列等式更新X⁽ⁱ⁺¹⁾

6)设value1＝D(X⁽ⁱ⁺¹⁾,Y^(j)),i＝i+1；

7)value1-value2≤ξ

8)设value3＝D(X⁽⁰⁾,Y⁽⁰⁾)；

9)根据下列等式更新Y^(j+1)：

10)value4＝D(X⁽ⁱ⁾,Y^(j+1)),j＝j+1

11)value3-value4≤ξ

12)直到收敛

输出：关于图形和文本的两个投影矩阵X∈R^c×p和Y∈R^c×q。

2.根据权利要求1所述的用于跨媒体检索的方法，其特征在于，其中DNN网络为卷积、池化及全连接网络的组合(不限于本发明特定组合)。

3.根据权利要求2所述的用于跨媒体检索的方法，其特征在于，W_p和W_q的计算方法如下：

4.根据权利要求1所述的用于跨媒体检索的方法，其目的是为求解矩阵X∈R^c×p，Y∈R^c×q，使得目标函数最小。