[发明专利]基于工作流的数据集成系统

摘要

本发明提出基于工作流的数据集成系统，该系统包括同步接口单元、模块配置单元、发布同步单元、信息系统单元，整合整个校园的数据和应用，并将它们在一个统一的视图中进行展现是一个复杂的任务。大量的不一致性不仅仅体现在校园各个系统的技术、数据结构和应用功能上，而且在整体的校园信息化体系结构上也存在着基本的差距。有一些集成需求是面向数据的，尤其是那些对大数据量的需求。还有一些其它的集成项目是基于事件驱动的体系架构(EDA)或者面向服务的体系架构(SOA)，如异步或同步的集成，设计新颖，是一项很好的设计方案，很有市场推广前景。

主权项

基于工作流的数据集成系统，其特征在于，该系统包括同步接口单元、模块配置单元、发布同步单元、信息系统单元；对数据集成，EAI集成架构中的点到点架构虽然可以很好地将数据从一数据源转换到另一源，但是每种点到点的构架方法都只是一种特例化的方法，而当数据源数目巨大时，很难以支持新的数据源加入，而ETL指的是从异构的数据源抽取数据并进行转换最后装载到数据仓库，针对ETL概念，Vassiliadis等人提出了一种过程模型，该ETL过程模型从不同的数据源抽取数据然后经过转换最终装载入目标数据库中，相对于数据仓库而言，数据集成领域的ETL有其自身的一些特点，如数据差异性更大，不仅是结构化的数据，可能还涉及到半结构化数据和非结构化数据；同时数据抽取，转换和加载等操作往往在不同的地方，需要远距离传输，考虑到性能需求需要尽量减小网络开销，因此，可以通过对ETL的扩展和修改以解决金融领域数据集成的问题；经过总体架构设计、集成开发、部署运行直至项目圆满完成的一个流程，此流程作为实施人员进行高校数据集成时的指导，具体步骤是：(1)搜集数据集成需求，并进行需求分析，整理成需求文档，以便成为项目实施的基础，因此需求分析是整个数据集成项目的关键；(2)确定数据集成总体框架，对整理出的需求，构建数据集成的总体架构，以集成中心库为中心，实现与各业务系统数据的交互；(3)数据集成平台的安装：包括集成工具的安装，数据库的安装；(4)集成开发：根据需求和总体架构，利用集成工具，实施数据集成中实际业务需求的项目设计；(5)部署运行：将实施完成的项目部署到服务器上，并进行相应的配置：信息系统单元包含有公文交换总控模块、公文信息缓存及备份模块、公文流转子系统：公文交换总控模块为各公文流转子系统提供了交换请求接口，一旦交换中心接受到交换请求后，便根据请求的实际配置情况，主动抓取需要交换的公文数据进行区层面的保存及整理，随后再将必要的数据主动推送到目标部门服务器，如果目标部门尚未配备公文服务器，则自动推送到区公用公文流转子系统中，同时，交换中心还将适当的触发各类消息提醒机制，主动提醒相关人员进行及时处理；公文信息缓存及备份模块该模块将通过一定的效验机制，缓存已经交换过的公文格式、工作流程等方面的信息，从软件设计上避免相关部门每次都交换此类信息而造成的性能低下等情况的发生，同时，还将对已交换数据做统一的备份和整理，保证某一部门的故障不会影响到其他部门系统的正常使用，保证工作的连续性。