[发明专利]基于用户信息建模的图像标注增强方法

摘要

本发明是一种基于用户信息建模的图像标注增强方法，首先，用户、图像及标注的原始关系被表示成一个三阶张量；然后，观测到的原始标注被表示成正负样本对，张量分解的目标是最小化正负样本对的排序关系；最终，利用分解得到的核心张量和因子矩阵进行子空间变换，可以得到共同子空间上的图像及标注表示。在大规模图片分享网站数据上，证明了发明的方法获得了更好的标注增强效果。

主权项

一种基于用户信息建模的图像标注增强方法，其特征在于，该方法的步骤包括：步骤S1：图片分享网站上的原始标注数据作为输入，利用三阶张量表示用户、图像和标注间的关系，生成用户、图像、标注之间的三元异质关系，以及用户与用户、图像与图像、标注与标注的同质关系；具体的表示方法是：利用用户加入共同的兴趣组计算用户与用户的相关性；利用图像与图像的视觉特征距离计算图像与图像的相关性；利用标注与标注共同出现的频率和该词语在词网上的相关程度，分别计算标注与标语的空间相关性和语义相关性；步骤S2：对三阶张量用排序表示，对三阶张量的每一个用户对、图像对，用观测到的原始标注构成正样本集合，用与正样本集合既不空间相关又不语义相关的标注构成负样本集合；将同质关系的相似性矩阵作为平滑约束加入到目标函数中，利用选择优化方法对该目标函数进行迭代求解，得到的用户、图像、标注因子矩阵和描述各子空间关系的核心张量；步骤S3：利用因子矩阵乘核心张量，对用户、图像、标注因子矩阵和描述各子空间关系的核心张量做空间变换；在用户维做积分，计算得到标注在图像子空间上的表示；用在同一子空间的图像表示和标注表示做内积，获得图像与标注的关系；对于一幅图像，与该幅图像关联最紧密的前K个标注即为增强后的该幅图像标注，K为根据该幅图像标注质量事先约定自然数。