[发明专利]生成文本摘要的方法及装置有效
申请号: | 201910243139.1 | 申请日: | 2019-03-28 |
公开(公告)号: | CN110019768B | 公开(公告)日: | 2021-09-21 |
发明(设计)人: | 迟耀明 | 申请(专利权)人: | 北京寓乐世界教育科技有限公司 |
主分类号: | G06F16/34 | 分类号: | G06F16/34;G06F16/33;G06N3/04 |
代理公司: | 北京众元弘策知识产权代理事务所(普通合伙) 11462 | 代理人: | 孙东风 |
地址: | 100041 北京市石景*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 生成 文本 摘要 方法 装置 | ||
1.一种生成文本摘要的方法,其特征在于,包括:
将待处理文本数据输入预设全局特征提取网络,抽取出所述待处理文本数据的第一文本摘要;
将所述第一文本摘要作为预训练结果,输入预设局部特征提取网络,并通过所述预设局部特征提取网络生成第二文本摘要;以及
将所述第二文本摘要作为生成所述待处理文本数据的文本摘要结果;
其中,所述全局特征提取网络包括如下建立步骤:
使用文本数据中的全文内容和文本标题作为训练数据集;
使用文本专业词汇作为辅助训练集;
根据所述训练数据集和辅助训练集,使用递归神经网络训练得到全局特征提取网络。
2.根据权利要求1所述的生成文本摘要的方法,其特征在于,所述预设局部特征提取网络包括如下建立步骤:
将循环神经网络作为主干网络并采用自注意力机制,搭建多重注意力网络;
在所述多重注意力网络中采用特定数据集作为训练集,训练得到局部特征提取网络。
3.根据权利要求2所述的生成文本摘要的方法,其特征在于,所述特定数据集的获取方法包括如下步骤:
选取预设领域中的文本数据作为原始文本;
接收经过转写处理后的所述文本数据作为转写文本;
将所述原始文本和所述转写文本分别作为所述局部特征提取网络的训练数据集。
4.根据权利要求1所述的生成文本摘要的方法,其特征在于,抽取出所述待处理文本数据的第一文本摘要包括:
在所述全局特征提取网络提取全局特征并作为关键词;
结合所述全局特征以及抽取式文本摘要算法抽取第一文本摘要。
5.一种生成文本摘要的装置,其特征在于,包括:
抽取模块,用于将待处理文本数据输入预设全局特征提取网络,抽取出所述待处理文本数据的第一文本摘要;
生成模块,用于将所述第一文本摘要作为预设局部特征提取网络的输入,通过所述预设局部特征提取网络生成第二文本摘要;以及
结果模块,用于输出所述待处理文本数据的文本摘要生成结果;
其中,所述抽取模块包括:全局特征提取网络建立模块,所述全局特征提取网络建立模块包括:
训练集单元,用于使用文本数据中的全文内容和文本标题作为训练数据集;
辅助单元,用于使用文本专业词汇作为辅助训练集;
第二训练单元,用于根据所述训练数据集和辅助训练集,使用递归神经网络训练得到全局特征提取网络。
6.根据权利要求5所述的生成文本摘要的装置,其特征在于,所述生成模块包括:预设局部特征提取网络建立模块,所述预设局部特征提取网络建立模块包括:
搭建单元,用于将循环神经网络作为主干网络并采用自注意力机制,搭建多重注意力网络;第一训练单元,用于在所述多重注意力网络中采用特定数据集作为训练集,训练得到局部特征提取网络。
7.根据权利要求5所述的生成文本摘要的装置,其特征在于,所述生成模块包括:特定数据集的获取模块,所述特定数据集的获取模块包括:
第一文本处理单元,用于选取预设领域中的文本数据作为原始文本;
第二文本处理单元,用于接收经过转写处理后的所述文本数据作为转写文本;
特征提取单元,用于将所述原始文本和所述转写文本分别作为所述局部特征提取网络的训练数据集。
8.根据权利要求5所述的生成文本摘要的装置,其特征在于,所述抽取模块还包括:第一文本摘要抽取模块,所述第一文本摘要抽取模块包括:提取单元和抽取单元,
所述提取单元,用于在所述全局特征提取网络提取全局特征并作为关键词;
所述抽取单元,用于结合所述全局特征以及抽取式文本摘要算法抽取第一文本摘要。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京寓乐世界教育科技有限公司,未经北京寓乐世界教育科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910243139.1/1.html,转载请声明来源钻瓜专利网。