[发明专利]数据处理方法、摘要展示方法、装置、设备及存储介质在审
| 申请号: | 202011102188.2 | 申请日: | 2020-10-15 |
| 公开(公告)号: | CN114372139A | 公开(公告)日: | 2022-04-19 |
| 发明(设计)人: | 邹易澄;康杨杨;孙常龙;赵露君;林君 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
| 主分类号: | G06F16/34 | 分类号: | G06F16/34;G06F40/216 |
| 代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 彭琼 |
| 地址: | 开曼群岛*** | 国省代码: | 暂无信息 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据处理 方法 摘要 展示 装置 设备 存储 介质 | ||
1.一种数据处理方法,包括:
获取待处理文本数据,所述待处理文本数据包括多个句子;
将所述多个句子输入目标摘要生成模型,确定所述多个句子中的至少一个主题句;
根据所述至少一个主题句获得所述待处理文本数据的摘要;
其中,所述目标摘要生成模型的输入为训练文本数据中多个样本句子,以及所述多个样本句子分别对应的上下文句子段,所述目标摘要生成模型的输出为所述训练文本数据对应的至少一个主题句。
2.根据权利要求1所述的方法,其中,所述根据所述至少一个主题句获得所述待处理文本数据的摘要,包括:
从所述至少一个主题句中确定每个主题句分别对应的上下文句子段;
根据所述每个主题句分别对应的上下文句子段获得所述待处理文本数据的摘要。
3.根据权利要求1或2所述的方法,其中,所述将所述多个句子输入目标摘要生成模型,确定所述多个句子中的至少一个主题句,包括:
通过所述目标摘要生成模型,提取所述多个句子各自对应的第一特征向量;
根据所述第一特征向量,从所述多个句子中选择至少一个句子作为主题句。
4.根据权利要求3所述的方法,其中,所述根据所述第一特征向量,从所述多个句子中选择至少一个句子作为主题句,包括:
根据所述第一特征向量和所述目标摘要生成模型的关系权重,计算所述多个句子中任意两个句子的第一特征向量之间的第一相关性系数;
根据所述第一相关性系数,从所述多个句子中选择至少一个句子作为主题句。
5.根据权利要求4所述的方法,其中,所述根据所述第一特征向量和所述目标摘要生成模型的关系权重,计算所述多个句子中任意两个句子的第一特征向量之间的第一相关性系数,包括:
根据所述第一特征向量和所述关系权重,计算所述多个句子中任意两个句子的第一特征向量之间的第二相关性系数;
根据所述第二相关性系数和预设距离系数,计算所述第一相关性系数,所述预设距离系数表示所述任意两个句子在所述待处理文本数据中位置之间的距离程度。
6.根据权利要求4或5所述的方法,其中,所述根据所述第一相关性系数,从所述多个句子中选择至少一个句子作为主题句,包括:
根据所述第一相关性系数,计算每个句子的第一特征向量的主题系数,所述主题系数是所述每个句子的第一特征向量对应的第一相关性系数之和;
将满足预设系数条件的主题系数对应的句子确定为主题句。
7.根据权利要求4或5所述的方法,其中,所述根据所述第一相关性系数,从所述多个句子中选择至少一个句子作为主题句,包括:
根据所述第一相关性系数与最大边界相关算法,在所述多个句子中选择至少一个句子作为主题句。
8.根据权利要求1所述的方法,其中,所述目标摘要生成模型包括上下文句子关系预测子模型;
在所述将所述多个句子输入目标摘要生成模型,确定所述多个句子中的至少一个主题句之前,所述方法还包括:
根据所述多个样本句子分别对应的上下文句子段,确定所述多个样本句子中每个样本句子对应的正样本和负样本;所述正样本为在上下文句子段中的句子,所述负样本为不在上下文句子段中的句子;
将所述每个样本句子输入所述上下文句子关系预测子模型,得到每个样本句子的特征向量;
根据所述每个样本句子的特征向量、所述正样本的特征向量、所述负样本的特征向量训练所述上下文句子关系预测子模型,直至满足第一预设训练停止条件,得到所述目标摘要生成模型。
9.根据权利要求8所述的方法,其中,所述第一预设训练停止条件包括上下文关系损失值小于或等于第一预设停止阈值;
其中,所述上下文关系损失值是将所述每个样本句子的特征向量、所述每个正样本的特征向量、所述每个负样本的特征向量,输入所述上下文句子关系预测子模型的上下文关系损失函数计算得到。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011102188.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种高浓度有机废气处理系统
- 下一篇:带补水仪功能的数据线





