[发明专利]一种基于全业务统一数据中心的XML数据接入方法

说明书

本发明涉及一种基于全业务统一数据中心的XML数据接入方法及系统，首先建立码表，将XML文件中需要涉及的同类数据进行码表分析；接着创建全业务统一数据中心SG‑RDB业务表，令其与XML文件中数据项的属性信息相对应，以保证XML解析数据正常，同时将各类数据按照逻辑进行轻度汇总；然后从单个XML文件中获取各类业务数据解析至SG‑RDB；从多个XML文件中获取各类关联的业务数据至SG‑RDB，将XML文件的各类数据转换成数据库能够识别的有目录结构的数据；最后对XML的数据与全业务统一数据中心SG‑RDB的数据进行核查，验证数据解析方式正确性。本发明能实现源端数据XML文件解析存入全业务统一数据中心分析域，满足易用、快速、准确的数据解析需求。

技术领域

本发明涉及数据处理技术领域，特别是一种基于全业务统一数据中心的XML数据接入方法及系统。

背景技术

随着全业务统一数据中心架构的推广，如何从自建系统提供的XML数据文件提取业务数据成为管理人员面临的难题，在数据接入工作中，从XML数据文件提取业务数据目前缺乏统一有效的方法，一般需要进行预处理，才能将业务数据提取出来，通常方式是转换成表格，在表格中进行数据关联，这种方式获得数据效率低，容易出错，且无法定时更新。

发明内容

有鉴于此，本发明的目的是提出一种基于全业务统一数据中心的XML数据接入方法及系统，能实现源端数据XML文件解析存入全业务统一数据中心分析域，满足易用、快速、准确的数据解析需求。

本发明采用以下方案实现：一种基于全业务统一数据中心的XML数据接入方法，包括以下步骤：

建立码表，将XML文件中需要涉及的同类数据进行码表分析；

创建全业务统一数据中心SG-RDB业务表，令其与XML文件中数据项的属性信息相对应，以保证XML解析数据正常，同时将各类数据按照逻辑进行轻度汇总；

从单个XML文件中获取各类业务数据解析至SG-RDB；

从多个XML文件中获取各类关联的业务数据至SG-RDB，将XML文件的各类数据转换成数据库能够识别的有目录结构的数据；

对XML的数据与全业务统一数据中心SG-RDB的数据进行核查，验证数据解析方式正确性。

本发明还提供一种基于上文所述的基于全业务统一数据中心的XML数据接入方法的系统，包括展现层、业务处理层、数据存储层、数据接入层以及基础架构服务层；

其中，所述数据接入层采用如上文所述的方法，将XML中的数据解析至所述数据存储层中；

所述数据存储层对归集的数据进行统一规范储存；

所述展现层为不同访问渠道的不同需求提供相应的系统服务；

所述业务处理层用于根据展现层的业务需求对从数据存储层中获取的数据进行包括数据挖掘与分析展现服务在内的操作；

所述基础架构服务层提供包括中间件、关系型数据库、操作系统、以及硬件基础设在内的服务。

进一步地，该系统采用JavaEE技术规范，基于SG-UAP开发平台，支持包括Oracle、MySQL、PostgreSQL、Gbase 8a、Sybase IQ在内的数据库数据源以及包括txt、csv、xml在内的文件数据源。

进一步地，所述展现层基于C/S构建，支持J2EE、CSS技术。

进一步地，所述业务处理层采用J2EE技术架构。

进一步地，所述数据存储层采用SG-RDB。

进一步地，所述数据接入层基于J2EE架构实现XML解析。