[发明专利]一种长篇章结构化文本摘要提取方法在审
| 申请号: | 201910957415.0 | 申请日: | 2019-10-10 |
| 公开(公告)号: | CN110781290A | 公开(公告)日: | 2020-02-11 |
| 发明(设计)人: | 杨理想;王云甘;周亚;黄家君;徐慧 | 申请(专利权)人: | 南京摄星智能科技有限公司 |
| 主分类号: | G06F16/34 | 分类号: | G06F16/34;G06F40/205;G06F40/253 |
| 代理公司: | 32341 南京中律知识产权代理事务所(普通合伙) | 代理人: | 沈振涛 |
| 地址: | 210000 江苏省南京市经济*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 摘要提取 篇章结构分析 文本 关系识别 领域文本 篇章结构 长文本 词向量 多义词 截取 单词 嵌入 计算机 全局 | ||
1.一种长篇章结构化文本摘要提取方法,其特征在于:输入长文本信息,摘要提取步骤为:
(1)转化为数值信息
对输入的长文本信息按标点符号进行分句处理,对每一句采用Bert Word Embedding动态词嵌入处理转换成该句的向量矩阵,即计算机学习的数值信息;
(2)篇章结构分析
对每两句进行隐式篇章关系分析,即将每两个相邻子句放入两个双向GRU模型中进行处理,对两个模型的隐藏层信息进行拼接,将拼接后的结果放入多层感知机中进行分类,得到预测的类别概率,取概率最高的类别标签作为对应标签,并依据识别的标签类别对长文本进行合理分段;
(3)摘要提取
按照基于模型和规则两种方式对步骤(2)中分好的每个段落进行摘要提取,最终的摘要结果输出是融合了这两种方式的输出结果。
2.根据权利要求1所述的一种长篇章结构化文本摘要提取方法,其特征在于:步骤(3)中基于模型的摘要提取,是将每一段信息输入到模型中,模型对段落的每一句先进行编码,即特征学习,再将学习到的特征进行解码,即对每个句子进行二分类,完成摘要句的提取。
3.根据权利要求2所述的一种长篇章结构化文本摘要提取方法,其特征在于:所述编码是由两层的双向GRU模型组成,第一层输入的是句子的向量矩阵,经过前向和后向的GRU模型处理后,拼接两个方向的隐藏层向量后做最大池化处理,将处理后的结果作为第二层输入,该层的隐藏层信息wi表示的每个词的位置信息,i表示句子中第i个词;第二层操作与第一层相同,拼接后的隐藏层信息hj代表了段落每个句子信息,j表示段落中第j句,用公式(1)对整个段落p表示:
其中Wp,b表示每一句的权重和偏置,Np表示段落中句子数量,i、j为1、2、3……正整数。
4.根据权利要求3所述的一种长篇章结构化文本摘要提取方法,其特征在于:解码层则根据编码过程中得到的信息,进一步计算文本中句子属于摘要句的概率,用公式(2)表示为:
其中yj=1表示段落中第j句为摘要句,W1,W2,W3为模型参数,sj是动态摘要表示,是已访问过的句子隐藏层的加权和,权重为这个句子最终属于摘要句的概率,用公式(3)表示为:
其中n、j表示段落中第n、j句,n、j为1、2、3……正整数,P(yn=1)表示已访问过句子中属于摘要句的概率,计算方式如公式(2)所示。
5.根据权利要求1所述的一种长篇章结构化文本摘要提取方法,其特征在于:步骤(3)中基于规则的摘要提取,是依据不同领域文本特点,制定相应规则,对该领域具有特点的关键词、特定模式进行匹配,对匹配到的关键词、特定模式周围的词进行召回,将召回后的句子作为规则提取的摘要。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京摄星智能科技有限公司,未经南京摄星智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910957415.0/1.html,转载请声明来源钻瓜专利网。





