[发明专利]一种基于注意力机制的双模态情感分析方法有效
| 申请号: | 202110103283.2 | 申请日: | 2021-01-26 |
| 公开(公告)号: | CN112860888B | 公开(公告)日: | 2022-05-06 |
| 发明(设计)人: | 林翔鹏;王甲海 | 申请(专利权)人: | 中山大学 |
| 主分类号: | G06F16/35 | 分类号: | G06F16/35;G06K9/62;G06N3/04;G06N3/08 |
| 代理公司: | 广州粤高专利商标代理有限公司 44102 | 代理人: | 张金福 |
| 地址: | 510260 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明公开了一种基于注意力机制的双模态情感分析方法,使用了预训练的BERT模型和ResNet152模型进行文本和图片的信息编码,在得到文本编码和图片编码后先分别提取了文本模态和图片模态的局部信息和全局信息,充分考虑了模态内的高维特征对最终分类的积极作用。在模态间融合部分,本发明使用了双向注意力机制和门控多模态单元相结合的方式,考虑了图文模态之间双向的交互作用,从而提取到更多互补的信息。在模态间融合之后采取细粒度的特征提取,进一步对所拼接的特征进行过滤,剔除可能冗余的特征,得到更紧凑对情感极性更有益的细粒度特征表示,再对文本模态和图片模态进行加权拼接,从而提高了分类的准确度。 | ||
| 搜索关键词: | 一种 基于 注意力 机制 双模 情感 分析 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中山大学,未经中山大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110103283.2/,转载请声明来源钻瓜专利网。
- 上一篇:一种电气柜
- 下一篇:一种有机肥生产设备及其生产工艺





