[发明专利]一种基于JSON配置化数据转换方法、装置、设备及介质

说明书

本发明公开了一种基于JSON配置化数据转换方法、装置、设备及介质。本发明涉及数据管理技术领域，该方法包括：基于预先构建的配置协议，通过调用配置协议接收外部数据；基于所述外部数据的数据结构，采用与所述数据结构相适配的读取规则读取所述外部数据的数据信息；确定标准化配置信息；其中，所述标准化配置信息包括数据名称以及数据类型；基于转换映射配置，确定标准化配置信息与数据信息的映射关系，以完成对外部数据的转换。本发明的技术方案，解决了接入外部数据多样性需要开发不同代码开发成本高、维护难的问题，只需要调整配置就可以快速进行外部数据接入进行调整，配置简单灵活，降低开发运维成本。

技术领域

本发明涉及数据管理技术领域，尤其涉及一种基于JSON配置化数据转换方法、装置、设备及介质。

背景技术

随着大数据技术的逐渐成熟，数据也成为众多企业公司的重要资产。而外部数据通常是具有使用率高、社会认可度高、样本集广、数据质量高且最重要的是符合企业自身客群等特征的数据。

目前企业进行外部数据接入，需要根据接入的外部数据差异性，进行单独的代码编写，大量冗余的代码，风格各异，存在开发时间长、开发成本大以及后期维护难等问题。

发明内容

本发明提供了一种基于JSON配置化数据转换方法、装置、设备及介质，解决了接入外部数据多样性需要开发不同代码开发成本高、维护难的问题，只需要调整配置就可以快速进行外部数据接入进行调整，配置简单灵活，降低开发运维成本。

根据本发明的一方面，提供了一种基于JSON配置化数据转换方法，所述方法由配置有JSON配置工具包的电子设备执行；所述方法包括：

基于预先构建的配置协议，通过调用配置协议接收外部数据；

基于所述外部数据的数据结构，采用与所述数据结构相适配的读取规则读取所述外部数据的数据信息；

确定标准化配置信息；其中，所述标准化配置信息包括数据名称以及数据类型；

基于转换映射配置，确定标准化配置信息与数据信息的映射关系，以完成对外部数据的转换。

可选的，基于预先构建的配置协议，通过调用配置协议接收外部数据，包括：

读取JSON配置工具包中的配置协议；其中，所述配置协议的键信息包括username、password、IP地址以及端口地址中的至少一种；

根据所述配置协议键信息，读取对应的值信息作为通信协议；

基于所述通信协议接收外部数据。

可选的，确定标准化配置信息，包括：

确定标准化配置信息中的字段名称、字段类型、字段长度以及字段约束中的至少一种。

可选的，基于转换映射配置，确定标准化配置信息与数据信息的映射关系，以完成对外部数据的转换，包括：

基于转换映射配置，确定外部数据的数据信息的输入字段和映射规则；

根据所述映射规则，确定有输入字段到标准化配置信息的映射处理方式，以完成对外部数据的转换。

可选的，所述映射处理方式包括确定输入字段的映射位置以及映射约束。

可选的，所述方法还包括：

响应于JSON配置工具包的配置变更请求，确定变更目标配置；

对所述变更目标配置进行变更处理；

基于所述变更处理结果，同步至JSON配置工具包。

可选的，所述JSON配置工具包是基于预设调用通用代码调用的。