[发明专利]一种基于软件定义开放工具集的数据共享融合平台及方法

说明书

本发明提供了一种基于软件定义开放工具集的数据共享融合平台及方法。该方案包括数据共享共融平台和数据共享融合工具；所述数据共享共融平台包括共享开放数据归集接口、数据计算接口、组件服务接口、数据使用接口、数据仓库、运行环境、可扩展容器引擎、元数据管理模块、资源目录管理模块、数据质量管理模块、平台服务管理和运行监控模块；所述数据共享融合工具包括数据处理工具和数据共享工具。该方案通过软件定义方式建立数据共享融合工具，并结合数据共享融合平台，对共享融合数据进行监管、融合和场景分析，解决信息孤岛数据低效率、高成本问题。

技术领域

本发明涉及数据处理技术领域，更具体地，涉及一种基于软件定义开放工具集的数据共享融合平台及方法。

背景技术

信息资源的融合和整合，能够形成广泛的数据共享，使得数据资源和基础数据的流动加速，进而推动各部门之间的业务创新，对于满足公众政务需求和跨部门合作都有重要的意义。近年来，信息资源的融合和整合的相关技术一直在不断快速的发展。例如，信息高速公路、访问美国工程等，均推动信息资源融合和整合技术的不断进步。

在本专利技术之前，现有的技术主要是对于数据资源的归集，而且开发利用的水平极低，易出现信息孤岛。信息孤岛多源数据分析共享使用流程复杂，不同的业务系统需要不同的共享数据支撑。为满足不同的业务分析使用的需求，当前共享平台中的数据基本上都是分散存储在各式各样的数据源中，各自存储系统接口不同造成多源数据分析环境复杂，造成共享平台数据使用效率低。同时在上层应用开发中缺少统一的数据视图，造成使用成本高。因此，在面对进行业务系统建设过程中，会出现信息孤岛，进而导致数据多份拷贝，无法支撑业务需要的高成本。

发明内容

鉴于上述问题，本发明提出了一种基于软件定义开放工具集的数据共享融合平台及方法，通过软件定义方式建立数据共享融合工具，并结合数据共享融合平台，对共享融合数据进行监管、融合和场景分析，解决信息孤岛数据低效率、高成本问题。

根据本发明实施例第一方面，提供一种基于软件定义开放工具集的数据共享融合平台。该平台包括数据共享共融平台和数据共享融合工具；

所述数据共享共融平台包括共享开放数据归集接口、数据计算接口、组件服务接口、数据使用接口、数据仓库、运行环境、可扩展容器引擎、元数据管理模块、资源目录管理模块、数据质量管理模块、平台服务管理和运行监控模块；

所述数据共享融合工具包括数据处理工具和数据共享工具；

所述共享开放数据归集接口用于对数据共享融合平台的外部的多源信息的接收；

所述数据计算接口用于将计算获得的数据反馈到数据共享融合平台的外部；

所述组件服务接口用于进行所述数据共享共融平台和所述数据共享融合工具之间的数据交互；

所述数据使用接口将数据处理后的数据在数据共享融合平台的外部进行扩展应用。

在一个或多个实施例中，优选地，所述元数据管理模块，具体包括：

元数据存储子模块，用于管理数据源接口、消息中间件和前端展现中的全部接口元数据，并将所述接口元数据按照技术元数据和业务元数据进行分类存储；

元数据查询子模块，用于对所述元数据存储子模块中的元数据基本信息进行查询与检索，并返回查询内容信息，其中，所述查询内容信息包括数据库表、维表、指标、过程和参与输入输出的对象信息；

元数据检查子模块，用于对元数据信息的完整性和合理性进行稽核检查，其中，稽核检查内容包括中间件sql解析成功率、表级关系完整率、字段关系完整率；

元数据校验子模块，用于根据所述资源目录管理模块使用JSR303进行校验参数的合法性。

在一个或多个实施例中，优选地，所述资源目录管理模块，具体包括：