[发明专利]一种用于保证异构数据库系统中数据集成完整性的系统在审
申请号: | 201611209332.6 | 申请日: | 2016-12-23 |
公开(公告)号: | CN108241651A | 公开(公告)日: | 2018-07-03 |
发明(设计)人: | 林殷;吴方才;朱雪松 | 申请(专利权)人: | 航天星图科技(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京安博达知识产权代理有限公司 11271 | 代理人: | 徐国文 |
地址: | 101399 北京市顺义区国*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 异构数据库系统 数据集成 数据完整性 异构数据源 集成数据 数据提供 转换功能 保证 | ||
1.一种用于保证异构数据库系统中数据集成完整性的系统,所述异构数据库系统包括数据仓库、集成数据层和应用接口;
底层的各个异构数据源构成了系统的数据仓库;
集成数据层封装了异构数据库集成系统的业务逻辑;
各种应用程序和对应的访问接口构成了系统的应用接口;
集成数据层是实现异构数据库中数据转换的核心,目的是访问各个数据源,集成数据源信息,协调各数据源间信息;集成数据层在各局部数据提供的共享数据的基础之上建立一个全局的虚拟视图,并不存储实际的数据;
具体包括:元数据DB、元数据管理器、封装器、切换器、应用层访问统一接口、异构数据源归一化接口;
元数据DB用于储存各异构数据库的元数据库信息;
元数据管理器用于制定集成系统的全局模式与局部数据库的模式之间的转换规则;
切换器用于异构数据库的注册、公共模型的生成和全局查询请求的接收;
封装器用于实现数据位置和访问的透明,对异构的数据进行包装;
集成数据层对外提供了两个统一接口,即应用层访问统一接口和底层异构数据库访问接口;其功能是屏蔽各数据库的差异,提供数据的透明访问,使得使用者无需知道数据的数据源模式及具体的物理位置等信息,只需通过系统定义的与具体数据源无关的SQL语句进行访问;
当应用开始运行后,首先需要读取基础配置,该配置信息来源于元数据DB,包括储存各异构数据源的元数据库信息;
连接多个数据源,其中包括主数据源A和至少一个数据源B,通过底层异构数据库访问接口捕获数据源B中的数据变化,如果没有新的数据变化,则线程进入等待状态,等待时间过后则开始新的循环;如果有新的数据变化则读取出数据,然后按照指定的传输协议格式,进行数据格式变化;将所述全局模式分别反馈给数据源A和数据源B,并由数据源A和数据源B根据所述数据完整性要求,重新组织将要集成的数据;汇总所有分支数据源的数据变化,将其反映到局部数据源的模式中,并最终由元数据管理器集成到全局数据模式中,以及将获取的数据存储数据缓存;连接主数据源A,根据局部数据源的模式变化所产生的对应的主数据源的模式,将数据格式变化结果同步至主数据源。
2.根据权利要求1所述的系统,其中,切换器由三个组件构成,包括:异构数据注册模块、查询规划模块和结果合并过滤模块;异构数据注册模块的主要功能是:在共享数据注册阶段,负责公共模型的建立以及异构数据库的共享注册;查询规划模块的主要功能是:在数据集成阶段,将客户端提交的基于全局数据库的标准查询分解成针对各个异构数据库的子查询,并提交到相应的包装器;结果合并过滤模块的主要功能是:将各异构数据库查询返回的XML文档进行合并,形成完整统一的查询结果,反馈至客户端浏览器。
3.根据权利要求1所述的系统,其中,封装器由智能更新模块、查询结果转换模块和数据库操作模块三个组件构成;智能更新模块采用spring框架的quartz任务定时的扫描由不同的异构数据库上传的XML描述文档,通过解析这些XML文档,实现数据自动更新;查询结果转换模块负责将SQL查询的结果转换为XML文档;数据库操作模块负责连接后台各个异构数据库,包括初始化数据库连接、分配连接、封装数据库基本操作、关闭连接的功能。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于航天星图科技(北京)有限公司,未经航天星图科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611209332.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:训练分类标准的训练方法和装置
- 下一篇:关键词聚类方法及装置