[发明专利]一种数据标准化方法、装置及电子设备

说明书

本发明提供了一种数据标准化方法、装置及电子设备，本发明中在获取到具有不同数据结构的待处理报文后，先转换待处理报文的格式，得到中间报文，然后对中间报文进行字段解析和标准化处理，得到标准化数据，这样就能够将不同数据结构的待处理报文标准化处理，得到具有统一格式的数据结构。

技术领域

本发明涉及数据处理领域，更具体的说，涉及一种数据标准化方法、装置及电子设备。

背景技术

随着互联网线上贷款产品的日益丰富，第三方征信数据在金融领域的应用日益广泛和深化。大部分互联网金融机构在贷款审批时会引入第三方机构的征信数据作为审批依据。如引入芝麻信用的芝麻信用分数据等。

但是第三方机构的征信数据的数据结构不同，没有统一的数据结构。

发明内容

有鉴于此，本发明提供一种数据标准化方法、装置及电子设备，以解决第三方机构的征信数据的数据结构不同，没有统一的数据结构的问题。

为解决上述技术问题，本发明采用了如下技术方案：

一种数据标准化方法，包括：

获取待处理报文以及所述待处理报文的数据来源；

对所述待处理报文进行格式转换，转换成具有预设格式的中间报文；

依据所述待处理报文的字段解析规则以及所述数据来源，对所述中间报文进行字段解析以及标准化处理，得到标准化数据。

优选地，依据所述待处理报文的字段解析规则以及所述数据来源，对所述中间报文进行字段解析以及标准化处理，得到标准化数据，包括：

依据所述待处理报文的字段解析规则以及数据来源，对所述中间报文进行字段解析和配置，得到预设标识字段的内容；

将所述预设标识字段以及预设标识字段的内容添加到所述中间报文中，得到目标报文；

依据所述预设标识字段以及预设标识字段的内容，对所述目标报文进行字段解析，解析得到字段路径名称与字段值的对应关系；

将所述对应关系中的字段路径名称进行名称标准化处理，得到标准化数据。

优选地，将所述对应关系中的字段路径名称进行名称标准化处理，得到标准化数据后，还包括：

保存所述标准化数据，并设置所述标准化数据的数据有效期；

获取查询所述标准化数据的查询时间；

若所述查询时间在所述数据有效期内，返回包括所述标准化数据的查询结果；

若所述查询时间不在所述数据有效期内，返回表征查询失败的查询结果。

优选地，将所述预设标识字段以及预设标识字段的内容添加到所述中间报文中，得到目标报文后，还包括：

获取多个不同的待整合报文；

筛选出至少一个字段内容与所述目标报文中至少一个所述预设标识字段的内容相同的待整合报文；

将筛选出的待整合报文与所述目标报文进行据整合。

优选地，依据所述待处理报文的字段解析规则以及数据来源，对所述中间报文进行字段解析，得到预设标识字段的内容之后，还包括：

识别所述中间报文中的错误字段内容，并将所述错误字段内容设置为预设数据。

一种数据标准化装置，包括：

获取模块，用于获取待处理报文以及所述待处理报文的数据来源；

格式转换模块，用于对所述待处理报文进行格式转换，转换成具有预设格式的中间报文；