[发明专利]用于信息交互的方法及装置

权利要求书

1.一种用于信息交互的方法，其特征在于，所述方法包括：

获取待处理信息，所述待处理信息包括文字信息和图像；

提取所述待处理信息的文字信息的特征词，基于所述特征词查找所述待处理信息的图像的描述信息，其中，所述特征词用于表征对所述图像的查找请求，所述描述信息用于表征对所述图像的文字描述；

通过所述描述信息构建所述待处理信息的应答信息。

2.根据权利要求1所述的方法，其特征在于，所述提取所述待处理信息的文字信息的特征词包括：

对文字信息进行语义识别，得到对应所述文字信息的语义信息；

从所述语义信息中提取特征词。

3.根据权利要求1所述的方法，其特征在于，所述基于所述特征词查找所述待处理信息的图像的描述信息包括：

将图像导入图像查找模型，得到与所述图像对应的待匹配图像集合，所述待匹配图像集合包括至少一张待匹配图像，所述图像查找模型用于表征图像与待匹配图像之间的第一对应关系；

将待匹配图像导入语义标签模型，得到对应待匹配图像集合的语义标签集合，所述语义标签模型用于表征待匹配图像与语义标签的第二对应关系，语义标签用于对待匹配图像进行文字说明；

从所述语义标签集合中筛选出一个待识别语义标签，将待识别语义标签中的与所述图像对应的名词的解释信息作为描述信息。

4.根据权利要求3所述的方法，其特征在于，所述从所述语义标签集合中筛选出一个待识别语义标签包括：

统计所述语义标签集合中相同的语义标签的数量，将数量最多的语义标签作为待识别语义标签。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：对所述描述信息进行修正的步骤，所述对所述描述信息进行修正的步骤包括：

接收对应所述应答信息的反馈信息，所述反馈信息用于评价所述应答信息的准确性；

对所述反馈信息进行语义识别，得到准确率信息；

在所述准确率信息低于设定阈值时，从所述语义标签集合中除待识别语义标签以外的语义标签中选择二次待识别标签；

将二次待识别标签中的与所述图像对应的名词的解释信息作为二次描述信息；

通过二次描述信息构建所述待处理信息的应答信息。

6.一种用于信息交互的装置，其特征在于，所述装置包括：

待处理信息获取单元，用于获取待处理信息，所述待处理信息包括文字信息和图像；

描述信息获取单元，用于提取所述待处理信息的文字信息的特征词，基于所述特征词查找所述待处理信息的图像的描述信息，其中，所述特征词用于表征对所述图像的查找请求，所述描述信息用于表征对所述图像的文字描述；

应答信息构建单元，用于通过所述描述信息构建所述待处理信息的应答信息。

7.根据权利要求6所述的装置，其特征在于，所述描述信息获取单元包括：

语义识别子单元，用于对文字信息进行语义识别，得到对应所述文字信息的语义信息；

特征词提取子单元，用于从所述语义信息中提取特征词。

8.根据权利要求6所述的装置，其特征在于，所述描述信息获取单元包括：

待匹配图像获取子单元，用于将图像导入图像查找模型，得到与所述图像对应的待匹配图像集合，所述待匹配图像集合包括至少一张待匹配图像，所述图像查找模型用于表征图像与待匹配图像之间的第一对应关系；

语义标签获取子单元，用于将待匹配图像导入语义标签模型，得到对应待匹配图像集合的语义标签集合，所述语义标签模型用于表征待匹配图像与语义标签的第二对应关系，语义标签用于对待匹配图像进行文字说明；

描述信息获取子单元，用于从所述语义标签集合中筛选出一个待识别语义标签，将待识别语义标签中的与所述图像对应的名词的解释信息作为描述信息。

9.根据权利要求8所述的装置，其特征在于，所述描述信息获取子单元包括：

统计所述语义标签集合中相同的语义标签的数量，将数量最多的语义标签作为待识别语义标签。