[发明专利]数据校验方法、装置、电子设备及存储介质

说明书

本发明涉及人工智能技术领域，提供一种数据校验方法、装置、电子设备及存储介质，所述方法包括：加载校验请求中的多个目标待校验数据至EXCEL模板中；读取EXCEL模板的规则栏对应的每个单元格的关键字段；将每个单元格的关键字段输入至预先训练好的BERT模型中，并获取BERT模型输出的每个单元格的规则属性；对所有单元格的规则属性进行合并得到EXCEL模板的校验规则表；根据校验规则表对EXCEL模板中的每个单元格中的目标待校验数据进行校验。本发明通过BERT模型输出的每个单元格的规则属性，不需要编码维护每个单元格的规则属性，确保了每个单元格的规则属性的准确性，进而提高了数据校验的效率和准确率。

技术领域

本发明涉及人工智能技术领域，具体涉及一种数据校验方法、装置、电子设备及存储介质。

背景技术

EXCEL文件能够方便的制作出各种表格，被广泛使用，现有技术将EXCEL文件导入数据库的时候，需要花费大量的时间以及编写代码对EXCEL文件中的单元格的规则属性进行校验。

然而，由于EXCEL文件的单元格规则属性复杂度高，编写代码过程中容易出现错误，无法确保单元格的规则属性的准确性，导致数据校验的效率和准确率低。

因此，有必要提供一种快速准确的数据校验方法。

发明内容

鉴于以上内容，有必要提出一种数据校验方法、装置、电子设备及存储介质，通过BERT模型输出的每个单元格的规则属性，不需要编码维护每个单元格的规则属性，确保了每个单元格的规则属性的准确性，进而提高了数据校验的效率和准确率。

本发明的第一方面提供一种数据校验方法，所述方法包括：

加载校验请求中的多个目标待校验数据至EXCEL模板中；

读取所述EXCEL模板的规则栏对应的每个单元格的关键字段；

将所述每个单元格的关键字段输入至预先训练好的BERT模型中，并获取所述BERT模型输出的每个单元格的规则属性；

对所有单元格的规则属性进行合并得到所述EXCEL模板的校验规则表；

根据所述校验规则表对所述EXCEL模板中的每个单元格中的目标待校验数据进行校验。

可选地，所述将所述每个单元格的关键字段输入至预先训练好的BERT模型中，并获取所述BERT模型输出的每个单元格的规则属性包括：

对每个单元格的关键字段进行分词处理得到词块嵌入；

根据所述每个单元格的关键字段的上下文关系获取每个词块的段号嵌入及每个词块的位置嵌入；

将所述词块嵌入、所述段号嵌入及所述位置嵌入叠加形成词嵌入向量；

将所述词嵌入向量输入至预先训练好的BERT模型中进行语义识别得到目标词向量；

将所述目标词向量输入预设的命名实体属性识别模型中进行命名实体属性识别，得到每个单元格的规则属性。

可选地，所述对所有单元格的规则属性进行合并得到所述EXCEL模板的校验规则表包括：

对所述所有单元格的规则属性按照每个所述单元格的位置坐标进行合并得到所述EXCEL模板的校验规则表。

可选地，所述根据所述校验规则表对所述EXCEL模板中的每个单元格中的目标待校验数据进行校验包括：

获取所述EXCEL模板中的每个单元格中的目标待校验数据对应的目标位置坐标；

根据所述目标位置坐标从所述校验规则表中获取每个单元格对应的规则属性；

按照每个单元格的规则属性对对应单元格中的目标待校验数据进行校验。