[发明专利]基于多头双向注意力的交互式Transformer的隐式篇章关系识别方法在审
| 申请号： | 202110109110.1 | 申请日： | 2021-01-27 |
| 公开（公告）号： | CN112836048A | 公开（公告）日： | 2021-05-25 |
| 发明（设计）人： | 贺瑞芳;王建;贺迎春;朱永凯;黄静 | 申请（专利权）人： | 天津大学 |
| 主分类号： | G06F16/35 | 分类号： | G06F16/35;G06F40/30;G06F40/211;G06N3/04;G06N3/08 |
| 代理公司： | 天津市北洋有限责任专利代理事务所 12201 | 代理人： | 刘子文 |
| 地址： | 300072*** | 国省代码： | 天津;12 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开一种基于多头双向注意力的交互式Transformer的隐式篇章关系识别方法，本发明方法将双向注意力机制和多头注意力机制相结合，在隐式篇章关系识别中引入Transformer可以更好得挖掘篇章论元对的内部交互信息，从而可以更好地学习到包含重要交互信息的用于识别篇章关系的特征向量表示以进行篇章关系识别。本发明方法可以通过Bi‑attention有效地捕获两个篇章论元之间的交互信息。此外，与现有方法相比，本发明方法可以将篇章论元向量表示映射到具有多头注意力机制的不同表示子空间中，并从不同方面更全面地挖掘交互信息，并得到用于识别篇章关系的特征向量表示，最后将用于识别篇章关系的特征向量表示输入到篇章关系识别层进行篇章关系识别。 | ||
| 搜索关键词： | 基于 多头 双向 注意力 交互式 transformer 篇章 关系 识别 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于天津大学，未经天津大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202110109110.1/，转载请声明来源钻瓜专利网。
