[发明专利]一种基于迭代注意力机制的视觉问答模型在审
| 申请号: | 201911099046.2 | 申请日: | 2019-11-12 |
| 公开(公告)号: | CN110889340A | 公开(公告)日: | 2020-03-17 |
| 发明(设计)人: | 颜丙旭;刘杰 | 申请(专利权)人: | 哈尔滨工程大学 |
| 主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/62 |
| 代理公司: | 北京汇众通达知识产权代理事务所(普通合伙) 11622 | 代理人: | 李志男 |
| 地址: | 150001 黑龙江*** | 国省代码: | 黑龙江;23 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明公开了一种基于迭代注意力机制的视觉问答模型,包括三个步骤:步骤S1,构建双重注意力机制;步骤S2,迭代模型内部结构;步骤S3,答案预测;本发明使用VGGNet提取图像的特征;将问题和答案用双向LSTM方式编码;把第一部分和第二部分的结果作为输入即以图片特征向量和问题特征向量作为输入,首先两个向量分别加入注意力机制,经过计算后得到两个注意力特征向量,再进行融合得到新的图片和问题特征向量;迭代进行第三部分工作内容降低关注区域粒度,得到最后图片和问题特征向量;利用上述步骤中得到的图片和问题的特征向量预测答案分布。本发明的有益效果是:关注点在问题上,且关注区域精确,预测答案准确。 | ||
| 搜索关键词: | 一种 基于 注意力 机制 视觉 问答 模型 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨工程大学,未经哈尔滨工程大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201911099046.2/,转载请声明来源钻瓜专利网。





