[发明专利]数据处理方法、装置、计算机设备和计算机可读存储介质

说明书

本申请涉及一种数据处理方法、装置、计算机设备和计算机可读存储介质。所述数据处理方法包括：根据预设分类类别，对多个客户样本的业务数据进行分类，得到分类数据；根据预设的多个业务字段，从所述分类数据中提取与所述业务字段匹配的目标数据；所述分类类别及所述业务字段均是根据目标模型的训练需求确定的；根据所述业务字段及所述目标数据，生成与各所述分类类别对应的标准数据表；所述标准数据表用于训练所述目标模型。采用本方法在根据金融数据进行特征提取及模型训练过程中，能够降低数据处理量，提升数据处理效率。

技术领域

本发明涉及金融科技技术领域，特别是涉及一种数据处理方法、装置、计算机设备和计算机可读存储介质。

背景技术

随着计算机技术在各个行业的快速发展，越来越多的传统行业都在逐步向科技化发展，传统金融业亦在逐步向金融科技转变。

在实际的业务运营中，不同的企业拥有各自不同的数据标准格式，以支撑其业务线的正常运转，并且各企业之间的数据格式往往差异较大。

在金融科技中，存在大量的金融数据处理的场景，然而，若直接根据各企业提供的样本的原始数据进行特征工程及建模等，会造成数据处理量大、数据处理效率低下的问题。

发明内容

基于此，有必要针对上述技术问题，提供一种能够在金融数据处理场景中，减少数据处理量、提升数据处理效率的数据处理方法、装置、计算机设备和计算机可读存储介质。

第一方面，本申请实施例提供了一种数据处理方法，所述数据处理方法包括：

根据预设分类类别，对多个客户样本的业务数据进行分类，得到分类数据；

根据预设的多个业务字段，从所述分类数据中提取与所述业务字段匹配的目标数据；所述分类类别及所述业务字段均是根据目标模型的训练需求确定的；

根据所述业务字段及所述目标数据，生成与各所述分类类别对应的标准数据表；所述标准数据表用于训练所述目标模型。

在其中一个实施例中，所述根据所述业务字段及所述目标数据，生成与各所述分类类别对应的标准数据表，包括：

检测所述目标数据的数据类型是否为枚举类型；

若所述目标数据的数据类型是枚举类型，则在预置的数字字典中，查找出与所述目标数据对应的数字编码；所述数字字典包括所述目标数据与所述数字编码的映射关系；

将所述数字编码导入与所述目标数据对应的所述业务字段下，以生成所述标准数据表。

在其中一个实施例中，所述方法还包括：

若所述目标数据的数据类型不是枚举类型，则将所述目标数据导入与所述目标数据对应的所述业务字段下，以生成所述标准数据表。

在其中一个实施例中，所述根据预设的多个业务字段，从所述分类数据中提取与所述业务字段匹配的目标数据，包括：

根据所述多个业务字段，采用SQL语句，生成多个SQL任务；

基于所述多个SQL任务，从所述分类数据中提取与所述业务字段匹配的目标数据。

在其中一个实施例中，所述基于所述多个SQL任务，从所述分类数据中提取与所述业务字段匹配的目标数据，包括：

检测所述多个SQL任务之间是否存在依赖关系；

若所述多个SQL任务之间不存在所述依赖关系，则并行执行所述多个SQL任务，以从所述分类数据中提取与所述业务字段匹配的目标数据。

在其中一个实施例中，所述分类类别包括交易类、非交易类及交易辅助类；