[发明专利]一种数据转换方法及装置

说明书

本申请公开了一种数据转换方法及装置。该数据转换方法用于将使用不同数据模型的源数据转换为使用统一需求数据模型的目标数据，该方法包括：获得待转换的源数据；读取预存的所述源数据对应数据模型的转换标注信息，所述转换标注信息中至少包括：需要保留的源数据字段信息；根据所读取的转换标注信息，从所述源数据中提取需要保留的源数据字段，得到目标数据。本申请技术方案与现有技术方案相比，不仅减少了转换逻辑的实现代码数量，而且将原本分散的多套数据转换逻辑集中在一起，从而有效降低了开发和维护成本。

技术领域

本申请涉及数据管理技术领域，尤其涉及一种数据转换方法及装置。

背景技术

数据管理是指对各种数据进行收集、存储、处理和应用的过程，在大数据时代，为了应对显著增长的数据量，除了需要提供充足的存储空间之外，对数据管理技术也提出了更高的要求。

对于数据存储方或数据使用方而言，往往需要从外部的数据源获取数据，而当外部数据源所提供的数据模型与实际使用所需的数据模型不一致时，就需要根据实际需求对从外部获取的数据进行转换处理，转换的内容可能包括对字段的取舍、字段名称的变更、字段类型的变更等等。

实际应用中，从不同的外部数据源所获取的数据模型是五花八门的，根据现有技术的实现方案，为了满足统一的数据存储及使用需求，需要针对每种外部数据模型分别编写转换逻辑。在数据源数量较多的情况下，需要投入大量的开发及维护成本，而且在很多应用场景中，数据源的数量是在不断增加的，这也使得整体的开发及维护成本难以控制。

发明内容

针对上述技术问题，本申请提供一种数据转换方法及装置，技术方案如下：

一种数据转换方法，用于将使用不同数据模型的源数据转换为使用统一需求数据模型的目标数据，该方法包括：

获得待转换的源数据；

读取预存的所述源数据对应数据模型的转换标注信息，所述转换标注信息中至少包括：需要保留的源数据字段信息；

根据所读取的转换标注信息，从所述源数据中提取需要保留的源数据字段，得到目标数据。

一种数据转换装置，用于将使用不同数据模型的源数据转换为使用统一需求数据模型的目标数据，该装置包括：

源数据获得模块，用于获得待转换的源数据；

标注信息读取模块，用于读取预存的所述源数据对应数据模型的转换标注信息，所述转换标注信息中至少包括：需要保留的源数据字段信息；

目标数据生成模块，用于根据所读取的转换标注信息，从所述源数据中提取需要保留的源数据字段，得到目标数据。

本申请所提供的技术方案，通过预先对源数据模型进行标注的方式，为不同的源数据模型配置数据转换需求，在需要对源数据进行转换时，只需调用一套通用的、能够识别上述数据转换需求的逻辑，即可实现对使用不同数据模型的源数据进行统一转换。与现有技术方案相比，不仅减少了转换逻辑的实现代码数量，而且将原本分散的多套数据转换逻辑集中在一起，从而有效降低了开发和维护成本。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本申请。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，还可以根据这些附图获得其他的附图。

图1是本申请的数据转换方法的流程示意图；

图2是本申请的数据转换装置的第一种结构示意图；

图3是本申请的数据转换装置的第二种结构示意图。