[发明专利]一种词向量和句向量互信息最大化的句嵌入方法及系统在审
申请号: | 202111368737.5 | 申请日: | 2021-11-18 |
公开(公告)号: | CN114036928A | 公开(公告)日: | 2022-02-11 |
发明(设计)人: | 王立松;盛添叶;刘绍翰;江国华 | 申请(专利权)人: | 南京航空航天大学 |
主分类号: | G06F40/211 | 分类号: | G06F40/211;G06F40/284;G06N3/04;G06N3/08 |
代理公司: | 南京钟山专利代理有限公司 32252 | 代理人: | 王磊 |
地址: | 211106 江*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种词向量和句向量互信息最大化的句嵌入方法及系统,其中方法包括编码第一待识别句子中的各词语;对第一待识别句子中目标词向量的多个维度进行置零操作;编码第二待识别句子中的各词语;将第一词向量矩阵中的每个词向量经过多头自注意力层计算;将第二词向量矩阵中的每个词向量经过多头自注意力层计算;对第三词向量矩阵进行平均池化操作;对第一整体句向量进行维度置零操作;计算第二整体句向量与第四词向量矩阵中对应的词向量的点积;计算第四词向量矩阵中词向量和第二整体句向量的互信息;将第四词向量矩阵中词向量和第二整体句向量的互信息最大化。本发明解决了现有的无监督句嵌入方法使用效果不佳的问题。 | ||
搜索关键词: | 一种 向量 互信 最大化 嵌入 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京航空航天大学,未经南京航空航天大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111368737.5/,转载请声明来源钻瓜专利网。