[发明专利]一种文本的生成方法、存储介质和电子装置在审
申请号: | 202010566230.X | 申请日: | 2020-06-19 |
公开(公告)号: | CN111832283A | 公开(公告)日: | 2020-10-27 |
发明(设计)人: | 祝彦森 | 申请(专利权)人: | 上海明略人工智能(集团)有限公司 |
主分类号: | G06F40/211 | 分类号: | G06F40/211;G06F40/295 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 张建秀;龙洪 |
地址: | 200232 上海市徐*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文本 生成 方法 存储 介质 电子 装置 | ||
本申请实施例公开了一种文本的生成方法、存储介质和电子装置。所述方法包括:确定预先获取的文本中符合预设关键信息判断条件的关键文本数据;对该文本中除所述关键文本数据中其他文本数据执行同义句生成操作,得到转换文本数据;将所述转换文本数据和所述关键文本数据进行合并,得到所述文本对应的同义句生成操作的新文本。
技术领域
本申请实施例涉及信息处理领域,尤指一种文本的生成方法、存储介质和电子装置。
背景技术
在机器学习技术领域,数据增强技术是扩充训练集的重要手段,常用于产生充足的新数据进行模型训练,从而增强模型的泛化能力,防止过拟合。
该技术已应用在图像领域,通过对图像的翻转、旋转、镜像、高斯白噪声等技巧实现数据增强。利用原数据生成新数据的同时,又要保证新数据和原有数据属于同一类别,在这一点上,图像的数据增强技术非常容易实现,比如将原图像进行水平翻转获得新图像,那么新图像所包含的内容仍然属于原图像。
与应用在图像领域不同,文本数据的数据增强的部分实现手段可以通过同义句生成来实现。当前大部分文本数据增强只是简单地进行同义句的生成,如在处理文本分类任务时就是对原始句子文本进行处理,得到所述原始句子文本语义相同的处理语句文本,并应用所述原始句子文本及所述处理语句文本进行文本分析。
在实际应用中,上述实现方式得到的新文本数据可以在文本分类任务中适用,但会缺少原文本中的重要信息,因此,该项生成方式有待优化。
发明内容
为了解决上述任一技术问题,本申请实施例提供了一种文本的生成方法、存储介质和电子装置。
为了达到本申请实施例目的,本申请实施例提供了一种文本的生成方法,包括:
确定预先获取的文本中符合预设关键信息判断条件的关键文本数据;
对该文本中除所述关键文本数据中其他文本数据执行同义句生成操作,得到转换文本数据;
将所述转换文本数据和所述关键文本数据进行合并,得到所述文本对应的同义句生成操作的新文本。
一种存储介质,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行上文所述的方法。
一种电子装置,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行上文所述的方法。
上述技术方案中的一个技术方案具有如下优点或有益效果:
确定预先获取的文本中符合预设关键信息判断条件的关键文本数据,对该文本中除所述关键文本数据中其他文本数据执行同义句生成操作,得到转换文本数据,将所述转换文本数据和所述关键文本数据进行合并,得到所述文本对应的同义句生成操作的新文本,在通过同义句生成操作增加新的语料数据来增加模型泛化能力的前提下,通过保留原文本中重要信息,以提高文本处理任务的准确率。
本申请实施例的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本申请实施例而了解。本申请实施例的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本申请实施例技术方案的进一步理解,并且构成说明书的一部分,与本申请实施例的实施例一起用于解释本申请实施例的技术方案,并不构成对本申请实施例技术方案的限制。
图1为本申请实施例提供的文本的生成方法的流程图;
图2为本申请实施例提供的实体标注的示意图;
图3为本申请实施例提供的关键词信息提取的方法流程图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海明略人工智能(集团)有限公司,未经上海明略人工智能(集团)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010566230.X/2.html,转载请声明来源钻瓜专利网。