[发明专利]基于GAT关系推理的视觉问答方法在审
| 申请号： | 202111359601.8 | 申请日： | 2021-11-16 |
| 公开（公告）号： | CN114168769A | 公开（公告）日： | 2022-03-11 |
| 发明（设计）人： | 缪亚林;李臻;童萌;白宛婷;李国栋 | 申请（专利权）人： | 西安理工大学 |
| 主分类号： | G06F16/532 | 分类号： | G06F16/532;G06F16/583;G06V10/764;G06V10/80;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司： | 西安弘理专利事务所 61214 | 代理人： | 刘娜 |
| 地址： | 710048 陕*** | 国省代码： | 陕西;61 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了基于GAT关系推理的视觉问答方法，具体为：首先，将问题划分为单词以向量化表示，并进行句子特征提取，得到问题特征向量；再使用Faster R‑CNN结合ResNet‑101网络模型获取对象空间坐标和对象类别，BUTD模型利用对象空间坐标和对象类别得到属性类，对象类二元组，使用关系解码器获得物体之间的边标签，使用问题引导的图注意力卷积网络动态更新图节点信息，最后将图表示和问题特征进行多模态融合后输入多层感知机中获取答案。对GAT2R模型在数据集上进行了消融实验验证，与基准模型BUTD相比，提高了准确度。 | ||
| 搜索关键词： | 基于 gat 关系 推理 视觉 问答 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于西安理工大学，未经西安理工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202111359601.8/，转载请声明来源钻瓜专利网。
