[发明专利]基于图像的问答方法、装置、计算机设备及存储介质

摘要

本申请涉及图像识别领域，揭示了一种基于图像的问答方法、装置、设备及介质，其中方法包括：获取输入的图像与目标问题；识别所述图像以提取图像包含的各个目标物体；识别每一个所述目标物体的可视化特征，根据所述目标物体的可视化特征计算所述图像的全局特征，根据所述全局特征确定所述图像对应的图像向量；计算每一个目标物体在所述图像中的局部视觉特征，根据局部视觉特征确定目标物体的物体文本描述向量；将所述图像向量、物体文本描述向量和目标问题通过联合嵌入注意力网络进行计算，得到所述目标问题的答案集合；计算所述答案集合中各个答案的置信度，根据所述置信度选取符合预设要求的答案作为目标答案。本申请能够提高图像问答的准确率。