[发明专利]一种基于预训练的结构化数据生成文本的方法

摘要

一种基于预训练的结构化数据生成文本的方法，本发明涉及结构化数据生成文本方法。本发明的目的是为了解决在结构化数据生成文本上，现有模型对表格数据进行建模时，没有考虑数据之间的内在隐含关系，导致文本生成准确率低的问题。过程为：一、随机MASK掉若干个三元组中一个三元组中的一个数据，用@代替；根据表格中数据间具有的计算序列关系得到表征@隐去的计算序列；二、得到表格中同一行的所有记录均值池化后的行向量；三、得到预训练模型，保留预训练模型的参数；四：得到表格行向量；五：验证步骤三的预训练模型；六：得到对表格中同一行的所有记录进行均值池化后的行向量；七：得到表格中数据代表的信息。本发明用于生成文本领域。

主权项

1.一种基于预训练的结构化数据生成文本的方法，其特征在于：所述方法具体过程为：/n步骤一、将表格中数据间具有计算序列关系的同类型数据划分为一组；/n将表格中数据转化成若干个三元组，一个三元组对应表格中的一个记录；/n随机MASK掉若干个三元组中一个三元组中的一个数据，用@代替；/n根据表格中数据间具有的计算序列关系得到表征@隐去的计算序列，@隐去的计算序列即为训练目标；/n步骤二、将步骤一得到的所有三元组信息输入预训练模型进行实体关系建模，得到对表格中同一行的所有记录进行均值池化后的行向量row