[发明专利]一种长篇章结构化文本摘要提取方法在审

专利信息
申请号: 201910957415.0 申请日: 2019-10-10
公开(公告)号: CN110781290A 公开(公告)日: 2020-02-11
发明(设计)人: 杨理想;王云甘;周亚;黄家君;徐慧 申请(专利权)人: 南京摄星智能科技有限公司
主分类号: G06F16/34 分类号: G06F16/34;G06F40/205;G06F40/253
代理公司: 32341 南京中律知识产权代理事务所(普通合伙) 代理人: 沈振涛
地址: 210000 江苏省南京市经济*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 摘要提取 篇章结构分析 文本 关系识别 领域文本 篇章结构 长文本 词向量 多义词 截取 单词 嵌入 计算机 全局
【权利要求书】:

1.一种长篇章结构化文本摘要提取方法,其特征在于:输入长文本信息,摘要提取步骤为:

(1)转化为数值信息

对输入的长文本信息按标点符号进行分句处理,对每一句采用Bert Word Embedding动态词嵌入处理转换成该句的向量矩阵,即计算机学习的数值信息;

(2)篇章结构分析

对每两句进行隐式篇章关系分析,即将每两个相邻子句放入两个双向GRU模型中进行处理,对两个模型的隐藏层信息进行拼接,将拼接后的结果放入多层感知机中进行分类,得到预测的类别概率,取概率最高的类别标签作为对应标签,并依据识别的标签类别对长文本进行合理分段;

(3)摘要提取

按照基于模型和规则两种方式对步骤(2)中分好的每个段落进行摘要提取,最终的摘要结果输出是融合了这两种方式的输出结果。

2.根据权利要求1所述的一种长篇章结构化文本摘要提取方法,其特征在于:步骤(3)中基于模型的摘要提取,是将每一段信息输入到模型中,模型对段落的每一句先进行编码,即特征学习,再将学习到的特征进行解码,即对每个句子进行二分类,完成摘要句的提取。

3.根据权利要求2所述的一种长篇章结构化文本摘要提取方法,其特征在于:所述编码是由两层的双向GRU模型组成,第一层输入的是句子的向量矩阵,经过前向和后向的GRU模型处理后,拼接两个方向的隐藏层向量后做最大池化处理,将处理后的结果作为第二层输入,该层的隐藏层信息wi表示的每个词的位置信息,i表示句子中第i个词;第二层操作与第一层相同,拼接后的隐藏层信息hj代表了段落每个句子信息,j表示段落中第j句,用公式(1)对整个段落p表示:

其中Wp,b表示每一句的权重和偏置,Np表示段落中句子数量,i、j为1、2、3……正整数。

4.根据权利要求3所述的一种长篇章结构化文本摘要提取方法,其特征在于:解码层则根据编码过程中得到的信息,进一步计算文本中句子属于摘要句的概率,用公式(2)表示为:

其中yj=1表示段落中第j句为摘要句,W1,W2,W3为模型参数,sj是动态摘要表示,是已访问过的句子隐藏层的加权和,权重为这个句子最终属于摘要句的概率,用公式(3)表示为:

其中n、j表示段落中第n、j句,n、j为1、2、3……正整数,P(yn=1)表示已访问过句子中属于摘要句的概率,计算方式如公式(2)所示。

5.根据权利要求1所述的一种长篇章结构化文本摘要提取方法,其特征在于:步骤(3)中基于规则的摘要提取,是依据不同领域文本特点,制定相应规则,对该领域具有特点的关键词、特定模式进行匹配,对匹配到的关键词、特定模式周围的词进行召回,将召回后的句子作为规则提取的摘要。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京摄星智能科技有限公司,未经南京摄星智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910957415.0/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top