[发明专利]数据描述方法及装置、计算机可读介质和电子设备

权利要求书

1.一种数据描述方法，其特征在于，应用于移动终端，包括：

获取输入数据；

确定所述输入数据的第一特征信息以及确定用于描述所述输入数据的至少一种目标数据类型；

获取所述目标数据类型对应的描述数据以及所述描述数据关联的第二特征信息；

根据所述第一特征信息和所述第二特征信息从所述描述数据中匹配目标描述数据，以基于所述目标描述数据跨模态表征描述所述输入数据。

2.根据权利要求1所述的方法，其特征在于，所述描述数据至少包括文本数据和图像数据；所述方法还包括：

提取所述文本数据对应的关键词，并将所述关键词与所述文本数据关联，作为文本数据类型的描述数据；

提取所述图像数据对应的图像标签，并将所述图像标签与所述图像数据关联，作为图像数据类型的描述数据；

基于所述关键词与所述图像标签确定所述文本数据类型的描述数据与所述图像数据类型的描述数据之间的匹配关系，以根据所述匹配关系实现所述文本数据与所述图像数据之间的相互转换描述。

3.根据权利要求2所述的方法，其特征在于，所述提取所述文本数据对应的关键词，包括：

对所述文本数据进行分词处理提取所述文本数据的关键词；以及

所述提取所述图像数据对应的图像标签，包括：

通过多标签模型提取所述图像数据的图像标签。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取在相册应用中输入的文本数据，并确定所述文本数据的关键词；

获取所述相册应用中存储的相册图像对应的图像标签，并计算所述关键词与所述图像标签的相似度；

根据所述相似度从所述相册图像中确定目标相册图像，并将所述目标相册图像按照所述相似度进行排序并展示。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取待描述的图像数据，并确定所述图像数据的图像标签；

获取数据库中存储的文本数据的关键词，计算所述图像标签与所述关键词的相似度，并根据所述相似度从所述文本数据中确定目标文本数据；或者

根据所述图像标签生成目标文本数据。

6.根据权利要求5所述的方法，其特征在于，根据所述图像标签生成目标文本数据，包括：

根据预设的文本语法模型确定所述图像标签之间的排列顺序以及连接词；

通过所述排列顺序、所述连接词、所述图像标签生成用于描述所述图像数据的目标文本数据。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取预先收集的不同所述目标数据类型下的描述数据，并提取所述描述数据对应的第二特征信息；

将所述描述数据与所述第二特征信息进行关联，并存储到数据库中。

8.根据权利要求1所述的方法，其特征在于，所述方法还包括：

将所述输入数据作为新的描述数据，以及将所述第一特征信息作为所述新的描述数据的第二特征信息；

将所述新的描述数据和所述新的描述数据的第二特征信息进行关联，并存储到数据库中。

9.根据权利要求1所述的方法，其特征在于，根据所述第一特征信息和所述第二特征信息从所述描述数据中匹配目标描述数据，包括：

确定所述第一特征信息的第一词向量，以及确定所述第二特征信息的第二词向量；

根据所述第一词向量和所述第二词向量计算所述第一特征信息和所述第二特征信息的相似度；

根据所述相似度大于或者等于相似度阈值的第二特征信息，从所述描述数据中确定目标描述数据。