[发明专利]基于数据联邦技术的异构数据源整合系统及其整合方法

说明书

技术领域

本发明属于计算机信息技术领域，涉及一种基于数据联邦技术的异构数据源整合系统，本发明还涉及上述及异构数据源整合系统的整合方法。

背景技术

随着技术的发展和业务开展的需要，政府、企事业单位各部门中形成了大量物理分散、类型和存储形式各异的数据源，因为体制与机制的要求，不是所有数据都可以进行数据集中，而由于业务的需要又要同时从多个分散的数据源中访问多个数据进行组合形成更有价值的数据。因此，整合已有的数据资源，能同时访问和处理来自多个数据源的数据，就是必然趋势。

目前，公知的异构数据源集成的处理方式是：数据联邦技术。数据联邦技术提供了一种为数据提供抽象的数据接口的能力，这些多个数据源组成的虚拟视图，可以使消费者不需要知道数据的物理位置、数据结构和保存方式。数据联邦允许应用直接访问数据，而不需耗时较长的数据架构的调整；能满足数据安全性较高的应用，不允许对数据进行复制和备份；能满足数据经常变换的环境，数据联邦提供灵活性、扩展性高的解决方案。对于数据集成过程中包含复杂数据转换的，会由于数据转换减低响应时间而带来负面影响。当真实数据源服务器负载增加，联邦服务器会把联邦视图分解为多个子操作，那么这些子操作越复杂，服务器的负载越大。对于数据服务的统一封装与管理，现有单一的交换方式，已不能满足时效性、一致性等更高的要求。

发明内容

本发明的目的是提供一种基于数据联邦技术的异构数据源整合系统，本发明的另一目的是提供上述整合系统的整合方法，解决了现有虚拟数据交换方式存在的交换方式单一的问题。

本发明的技术方案是，基于数据联邦技术的异构数据源整合系统，包括连接器框架、查询引擎、JDBC(Java数据库连接驱动)和VDB(虚拟数据库)；其中，连接器框架包括连接器、资源适配器和翻译器；

连接器用于提供查询引擎和物理数据源之间的抽象层，将整合系统中发出的查询命令转换成数据源特定的命令，并通过资源适配器执行上述命令；翻译器用于将不同的格式数据转换为统一格式；查询引擎用于处理数据源发送的查询请求；JDBC用于将查询结果与JAVA应用系统进行对接，将查询结果通过VDB发出。

本发明的特点还在于，

数据源包括关系型数据库、数据文件、Web服务数据源。

本发明的另一技术方案是，基于数据联邦技术的异构数据源整合系统的整合方法，具体按照以下步骤实施：

步骤1，外部的应用系统向异构数据源整合系统发送JDBC请求；

步骤2，JDBCAPI(JDBC接口)接收到步骤1发出的请求后，向VDB转发请求，查询引擎解析SQL语句所要查询的虚拟表；

步骤3，VDB将查询申请发送到连接器，连接器根据请求内容，判断请求内容所在的数据库，通过资源适配器向数据库获取数据；

步骤4，数据库获取数据后，将数据返回给翻译器，由翻译器将结果信息翻译并转换为标准的数据库数据集，返回给VDB；

步骤5，VDB将查询结果进行封装，以JDBC方式通过JDBCAPI发出，供外部应用系统调用，便完成了异构数据源的整合。

本发明的有益效果是，

1)一种基于数据联邦技术的异构数据源整合系统，通过设置VDB，可以不存储数据，但可以像访问关系型数据库管理系统一样进行使用，大大节约了系统资源，降低服务器负载；通过查询引擎、JDBC和VDB的整合，能够实现异构数据源的整合；

2)基于数据联邦技术的异构数据源整合系统的整合方法，解决在数据物理环境分散的情况下，进行统一访问和关联查询分析的问题，通过该方法，能够实现对数据查询时效性、一致性的目的。

附图说明

图1是本发明一种基于数据联邦技术的异构数据源整合系统的结构示意图。

图中，1.JDBC，2.VDB，3.连接器，4.资源适配器，5.数据库，6.翻译器，7.查询引擎，8.连接器框架。

具体实施方式

下面结合具体实施方式对本发明进行详细说明。

本发明的技术方案是，基于数据联邦技术的异构数据源整合系统，如图1所示，包括连接器框架8、查询引擎7、JDBC1和VDB2；其中，连接器框架8包括连接器3、资源适配器4和翻译器6；