[发明专利]融合BERT与词嵌入双重表征的汉越神经机器翻译方法在审
| 申请号： | 202111042653.2 | 申请日： | 2021-09-07 |
| 公开（公告）号： | CN113901843A | 公开（公告）日： | 2022-01-07 |
| 发明（设计）人： | 高盛祥;刘演;余正涛;毛存礼 | 申请（专利权）人： | 昆明理工大学 |
| 主分类号： | G06F40/58 | 分类号： | G06F40/58;G06F40/242;G06F40/49;G06K9/62 |
| 代理公司： | 昆明人从众知识产权代理有限公司 53204 | 代理人： | 何娇 |
| 地址： | 650093 云*** | 国省代码： | 云南;53 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明涉及融合BERT与词嵌入双重表征的汉越神经机器翻译方法，属于自然语言处理技术领域。本发明使用预训练语言模型和词嵌入分别对源语言序列进行表示学习，通过注意力机制建立两种表征之间的联系后进行拼接操作得到双重表征向量，再经过线性变换和自注意力机制，使词嵌入表征和预训练语言模型表征完全自适应融合在一起，得到对输入文本的充分表征，以此提高神经机器翻译模型性能。本发明提出的融合BERT与词嵌入双重表征的汉越神经机器翻译方法，解决了因为越南语是低资源语言而导致汉语与越南语的神经机器翻译的性能并不理想的问题，显著提高汉越神经机器翻译模型的质量。 | ||
| 搜索关键词： | 融合 bert 嵌入 双重 表征 神经 机器翻译 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于昆明理工大学，未经昆明理工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202111042653.2/，转载请声明来源钻瓜专利网。
- 上一篇：一种极深专色油墨印刷方法
- 下一篇：大数据融合碳排放治理、预测分析模型方法
