[发明专利]一种文本处理的方法、装置、存储介质及电子设备有效
申请号: | 202110392521.6 | 申请日: | 2021-04-13 |
公开(公告)号: | CN113204637B | 公开(公告)日: | 2022-09-27 |
发明(设计)人: | 汪沁;富饶;侯培旭;陆源源;冉祥映;华镇 | 申请(专利权)人: | 北京三快在线科技有限公司 |
主分类号: | G06F16/34 | 分类号: | G06F16/34 |
代理公司: | 北京曼威知识产权代理有限公司 11709 | 代理人: | 方志炜 |
地址: | 100080 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 处理 方法 装置 存储 介质 电子设备 | ||
1.一种文本处理方法,其特征在于,所述方法包括:
根据预设的分句规则,对原始文本进行处理,得到所述原始文本中包含的子句;
针对任意两个子句,将该两个子句输入预测模型,得到所述预测模型的输出的该两个子句之间的句间关系紧密程度表征值;
根据各子句之间的句间关系紧密程度表征值,对各子句进行合并;
根据合并结果,得到至少一个备选摘要,其中
根据各子句之间的句间关系紧密程度表征值,对各子句进行合并,具体包括:
根据各个子句在所述原始文本中的先后顺序,确定第一个子句为指定子句;确定所述指定子句的下一个子句作为待合并子句;判断所述指定子句与所述待合并子句之间的句间关系紧密程度表征值是否大于第一阈值;若是,则当所述指定子句与所述待合并子句的字数之和不大于第二阈值时,对所述指定子句与所述待合并子句进行合并,并将合并结果重新作为指定子句;若否,则将所述指定子句作为一个合并结果,并将所述待合并子句作为指定子句;
当所述指定子句与所述待合并子句之间的句间关系紧密程度表征值大于第一阈值,且所述指定子句与所述待合并子句的字数之和大于第二阈值时,所述方法还包括:
根据所述待合并子句的字数,以及所述待合并子句与所述待合并子句的下一个子句之间的句间关系紧密程度表征值,判断是否合并所述指定子句和所述待合并子句。
2.如权利要求1所述的方法,其特征在于,将该两个子句输入预测模型,具体包括:
将该两个子句以及该两个子句在所述原始文本中的顺序输入预测模型。
3.如权利要求1所述的方法,其特征在于,根据各子句之间的句间关系紧密程度表征值,对各子句进行合并之前,所述方法还包括:
针对任意两个子句,确定该两个子句之间的句法特征;
将具有指定句法特征的两个子句进行合并,并重新作为一个子句。
4.如权利要求1所述的方法,其特征在于,判断是否合并所述指定子句和所述待合并子句,具体包括:
若所述待合并子句的字数不大于第三阈值,且所述待合并子句与所述待合并子句的下一个子句之间的句间关系紧密程度表征值小于所述第一阈值,则对所述指定子句与所述待合并子句进行合并,并将合并结果重新作为指定子句;
若所述待合并子句的字数大于所述第三阈值,或,所述待合并子句与所述待合并子句的下一个子句之间的句间关系紧密程度表征值大于所述第一阈值,则将所述指定子句作为一个合并结果,并将所述待合并子句作为指定子句。
5.一种文本处理装置,其特征在于,包括:
分句模块,用于根据预设的分句规则,对原始文本进行处理,得到所述原始文本中包含的子句;
预测模块,用于针对任意两个子句,将该两个子句输入预测模型,得到所述预测模型的输出的该两个子句之间的句间关系紧密程度表征值;
合并模块,用于根据各子句之间的句间关系紧密程度表征值,对各子句进行合并;
备选摘要生成模块,用于根据合并结果,得到至少一个备选摘要;其中
所述合并模块具体用于,根据各个子句在所述原始文本中的先后顺序,确定第一个子句为指定子句;确定所述指定子句的下一个子句作为待合并子句;判断所述指定子句与所述待合并子句之间的句间关系紧密程度表征值是否大于第一阈值;若是,则当所述指定子句与所述待合并子句的字数之和不大于第二阈值时,对所述指定子句与所述待合并子句进行合并,并将合并结果重新作为指定子句;若否,则将所述指定子句作为一个合并结果,并将所述待合并子句作为指定子句;
当所述指定子句与所述待合并子句之间的句间关系紧密程度表征值大于第一阈值,且所述指定子句与所述待合并子句的字数之和大于第二阈值时,所述合并模块还用于,根据所述待合并子句的字数,以及所述待合并子句与所述待合并子句的下一个子句之间的句间关系紧密程度表征值,判断是否合并所述指定子句和所述待合并子句。
6.一种计算机可读存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述权利要求1~4任一项所述的方法。
7.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现上述权利要求1~4任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司,未经北京三快在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110392521.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:基于5G城市部件传感器的信息处理方法及物联网云平台
- 下一篇:四通阀