[发明专利]翻译模型训练方法、篇章级机器翻译方法及装置在审
| 申请号: | 202010761674.9 | 申请日: | 2020-07-31 |
| 公开(公告)号: | CN114065775A | 公开(公告)日: | 2022-02-18 |
| 发明(设计)人: | 张培;张旭;陈伟 | 申请(专利权)人: | 北京搜狗科技发展有限公司 |
| 主分类号: | G06F40/42 | 分类号: | G06F40/42;G06F40/211 |
| 代理公司: | 北京华沛德权律师事务所 11302 | 代理人: | 房德权 |
| 地址: | 100084 北京市海淀区中关*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 翻译 模型 训练 方法 篇章 机器翻译 装置 | ||
1.一种翻译模型训练方法,其特征在于,包括:
针对篇章级源端语料中目标词语,从所述篇章级源端语料中获取所述目标词语的补全词语;
根据所述补全词语,对所述篇章级源端语料中所述目标词语出现的源端句子进行语义补全,形成所述篇章级源端语料对应的补全篇章级源端语料;
依据多个所述补全篇章级源端语料和对应的目标端篇章语料对目标翻译模型进行训练,得到训练后的篇章级翻译模型。
2.如权利要求1所述的方法,其特征在于,所述从所述篇章级源端语料中获取所述目标词语的补全词语,包括:
通过依存句法分析工具对所述篇章级源端语料进行依存句法分析,以提取出所述目标词语的补全词语,或者
通过所述目标翻译模型从所述篇章级源端语料中提取出所述目标词语的补全词语。
3.如权利要求1所述的方法,其特征在于,所述从所述篇章级源端语料中获取所述目标词语的补全词语,包括:
分别对所述篇章级源端语料中每个源端句子进行信息提取,得到所述篇章级源端语料中每个词语的关联词语;
根据所述篇章级源端语料中每个词语的关联词语,确定出所述目标词语的关联词语;
根据所述目标词语的关联词语,得到所述目标词语的补全词语。
4.如权利要求3所述的方法,其特征在于,所述根据所述目标词语的关联词语,得到所述目标词语的补全词语,包括:
组合所述目标词语在不同源端句子中的关联词语,得到用于对所述目标词语出现的任意一个源端句子进行语义补全的一组补全词语;或者
从不同源端句子中提取到的所述目标词语的关联词语,分别筛选出所述目标词语当前所在源端句子中不存在的关联词语,得到用于对所述目标词语当前所在源端句子进行语义补全的一组补全词语。
5.如权利要求1所述的方法,其特征在于,所述根据所述补全词语对所述目标词语出现的源端句子进行语义补全,包括:
在所述目标词语的相邻位置添加所述目标词语的补全词语,对所述目标词语当前所在的源端句子进行语义补全,其中,对添加的所述补全词语设置有补全标签。
6.一种篇章级机器翻译方法,其特征在于,包括:
针对原始待翻译篇章中的目标词语,从所述原始待翻译篇章中获取所述目标词语的补全词语;
根据所述补全词语对所述目标词语出现的源端句子进行语义补全,形成所述原始待翻译篇章对应的补全待翻译篇章;
通过训练后的篇章级翻译模型对所述补全待翻译篇章进行翻译,得到翻译后篇章,其中,所述训练后的篇章级翻译模型是通过权利要求1-8中任一所述的翻译模型训练方法得到。
7.一种翻译模型训练装置,其特征在于,包括:
补全词语获取单元,用于针对篇章级源端语料中目标词语,从所述篇章级源端语料中获取所述目标词语的补全词语;
语义补全单元,用于根据所述补全词语,对所述篇章级源端语料中所述目标词语出现的源端句子进行语义补全,形成所述篇章级源端语料对应的补全篇章级源端语料;
模型训练单元,用于依据多个所述补全篇章级源端语料和对应的目标端篇章语料对目标翻译模型进行训练,得到训练后的篇章级翻译模型。
8.一种篇章级机器翻译装置,其特征在于,包括:
补全词语获取单元,用于针对原始待翻译篇章中的目标词语,从所述原始待翻译篇章中获取所述目标词语的补全词语;
语义补全单元,用于根据所述补全词语对所述目标词语出现的源端句子进行语义补全,形成所述原始待翻译篇章对应的补全待翻译篇章;
篇章翻译单元,用于通过训练后的篇章级翻译模型对所述补全待翻译篇章进行翻译,得到翻译后篇章,其中,所述训练后的篇章级翻译模型是通过权利要求1-5中任一所述的翻译模型训练方法得到。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1~6中任一所述方法的步骤。
10.一种电子设备,其特征在于,包括有存储器,以及一个或者一个以上的程序,其中一个或者一个以上的程序存储于存储器中,且经配置以由一个或者一个以上的处理器执行所述一个或者一个以上的程序所包含的用于进行如权利要求1~6中任一所述方法的操作指令。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京搜狗科技发展有限公司,未经北京搜狗科技发展有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010761674.9/1.html,转载请声明来源钻瓜专利网。





