[发明专利]数据特征的获取方法、装置、电子设备及存储介质

摘要

本申请提供了一种数据特征的获取方法、装置、电子设备及存储介质，包括：获取包括图像信息和文本信息的多媒体样本；分别提取图像信息的第一图像特征以及文本信息的第一文本特征；将第一图像特征和第一文本特征导入注意力机制模型，输出基于第一图像特征的注意力的第二文本特征，和/或基于第一文本特征的注意力的第二图像特征。本申请基于注意力机制，捕捉第一图像特征和第一文本特征之间的关联性，并得到应用了注意力机制的第二文本特征和/或第二图像特征，使得第二文本特征和第二图像特征包括了图像信息和文本信息之间的关联性，本申请获取的应用了注意力机制的特征是基于一个端到端的注意力机制模型实现的，减少了应用场景对多模型的依赖。

主权项

1.一种数据特征的获取方法，其特征在于，所述方法包括：获取多媒体样本，所述多媒体样本包括图像信息和文本信息；分别提取所述图像信息的第一图像特征以及所述文本信息的第一文本特征；将所述第一图像特征和所述第一文本特征导入注意力机制模型，输出基于所述第一图像特征的注意力的第二文本特征，和/或基于所述第一文本特征的注意力的第二图像特征。