[发明专利]非自回归神经机器翻译方法、装置、计算机设备和介质有效
申请号: | 201911083628.1 | 申请日: | 2019-11-07 |
公开(公告)号: | CN110852116B | 公开(公告)日: | 2021-08-31 |
发明(设计)人: | 冉邱;林衍凯;李鹏;周杰 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F40/58 | 分类号: | G06F40/58;G06N20/00 |
代理公司: | 深圳翼盛智成知识产权事务所(普通合伙) 44300 | 代理人: | 汪阮磊 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 回归 神经 机器翻译 方法 装置 计算机 设备 介质 | ||
1.一种非自回归神经机器翻译方法,其特征在于,包括:
获取源语言的源句子、以及所述源句子中词对应的词向量;
对所述词对应的词向量进行编码,得到关注上下文信息的编码向量;
根据所述源句子确定待翻译句子,所述待翻译句子包括待翻译词;
根据所述待翻译词对应的词向量、以及所述编码向量,将待翻译句子中的待翻译词按照目标语言的结构进行重排序,得到伪翻译句子,其中,将待翻译句子中的待翻译词按照目标语言的结构进行重排序由非自回归神经机器翻译的解码过程实现;
根据所述伪翻译句子中待翻译词对应的词向量、以及所述编码向量,将所述伪翻译句子翻译成所述目标语言的目标句子;
输出所述目标句子。
2.如权利要求1所述的非自回归神经机器翻译方法,其特征在于,根据所述待翻译词对应的词向量、以及所述编码向量,将待翻译句子中的待翻译词按照目标语言的结构进行重排序,得到伪翻译句子,包括:
根据所述待翻译词对应的词向量、以及所述编码向量,预测源句子中各个词在待生成伪翻译句子中词位置上的概率;
根据所述概率从所述源句子的词中,确定所述词位置上的伪翻译词,得到伪翻译句子。
3.如权利要求2所述的非自回归神经机器翻译方法,其特征在于,根据所述待翻译词对应的词向量、以及所述编码向量,预测源句子中各个词在待生成伪翻译句子中词位置上的概率,包括:
根据所述待翻译词对应的词向量、以及所述编码向量,计算所述待翻译词与所述源句子中词之间的相关性信息;
根据所述相关性信息对所述源句子中所有词对应的编码向量进行融合,得到第一融合后向量;
将所述第一融合后向量与所述待翻译词的词向量进行融合,得到所述待翻译词的特征向量;
根据所述待翻译词的特征向量,预测源句子中各个词在待生成伪翻译句子中目标位置上的概率。
4.如权利要求2所述的非自回归神经机器翻译方法,其特征在于,根据所述待翻译词对应的词向量、以及所述编码向量,预测源句子中各个词在待生成伪翻译句子中词位置上的概率,包括:
确定待生成伪翻译句子中当前需要预测的当前词位置;
根据历史伪翻译词对应的词向量以及所述编码向量,预测源句子中各个词在待生成伪翻译句子中当前词位置上的概率,其中,历史伪翻译词为历史时间预测的历史词位置上的伪翻译词。
5.如权利要求4所述的非自回归神经机器翻译方法,其特征在于,根据历史伪翻译词对应的词向量以及所述编码向量,预测源句子中各个词在待生成伪翻译句子中当前词位置上的概率,包括:
根据所述历史伪翻译词对应的词向量、以及所述编码向量,计算当前待翻译词与所述源句子中词之间的相关性信息;
根据所述相关性信息对所述源句子中所有词对应的编码向量进行融合,得到第二融合后向量;
将所述第二融合后向量与当待翻译词的词向量进行融合,得到当前待翻译词的特征向量;
根据所述当前待翻译词的特征向量,预测源句子中各个词在待生成伪翻译句子中当前词位置上的概率。
6.如权利要求2所述的非自回归神经机器翻译方法,其特征在于,根据所述伪翻译句子中待翻译词对应的词向量、以及所述编码向量,将所述伪翻译句子翻译成所述目标语言的目标句子,包括:
基于伪翻译句子中待翻译词对应的词向量,构建所述待翻译词对应的目标词向量;
根据所述待翻译词对应的目标词向量、以及编码向量,将所述伪翻译句子翻译成所述目标语言的目标句子。
7.如权利要求6所述的非自回归神经机器翻译方法,其特征在于,基于伪翻译句子中待翻译词对应的词向量,构建所述待翻译词对应的目标词向量,包括:
获取所述伪翻译句子中待翻译词的概率分布,所述概率分布包括所述源句子中各个词在待生成伪翻译句子中词位置上的概率;
根据所述概率分布对所述源句子中各个词的词向量进行融合,得到待翻译词的目标词向量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911083628.1/1.html,转载请声明来源钻瓜专利网。