[发明专利]一种基于大数据技术架构的数据中台服务体系

说明书

本发明公开了一种基于大数据技术架构的数据中台服务体系，涉及大数据技术领域。本发明包括数据集成模块、数据存储加工模块、数据处理模块、应用分析模块和用户访问模块；数据集成模块能快速、稳定的进行数据收集，并快速的对收集的数据进行处理，数据存储加工模块能对数据集成模块收集的数据进行加工、储存。本发明通过设置的数据集成模块，能稳定、快速的收集数据，从而减少了数据加工过程中出错的情况，通过设置的数据储存加工模块，能快速的对收集的数据进行处理、加工，从而提高了数据加工的效率，通过设置的数据处理模块，能将数据进行转化、处理、保护，从而进一步提高了数据加工的效率，降低了数据加工的成本。

技术领域

本发明属于大数据技术领域，特别是涉及一种基于大数据技术架构的数据中台服务体系。

背景技术

我国的金融行业已经进入“大数据时代”，金融机构的信息化数据体量更是呈现爆炸式增长。如何将金融机构在业务开展过程中积累和沉淀的各类信息化数据资产进行有效活化利用，更好的服务于经营管理、投资决策，以及风险防范，成为金融机构迫切需要解决的问题。另外，当前我国金融科技发展步入快速成长阶段，新技术的快速发展不断深化金融科技应用。从全球的金融行业发展趋势来看，科技驱动业务在资管领域逐步替代资源驱动业务成为主流。在业内人士看来，金融科技的研究和摸索步入“深水区”，资管科技有望成为金融科技的又一个突破点。伴随着金融科技的应用以及业务规模的增长，金融机构面临着日趋复杂的信息环境，业务数据量在逐步增长，由于没有集中的存储管理导致大量的数据孤岛和数据缺失，由于没有统一的数据应用管理，导致数据使用的混乱和无序和多点管理，使原本应该发挥重要作用的数据没有充分发挥应有的价值。分散各处难以融合的数据，无法很好地支撑企业经营决策，也无法很好地应对快速变化的前端业务，而数据中台能够很好的联通传统IT架构和各类数据，融合新老模式，整合孤岛数据，沉淀数据资产，快速形成数据服务能力，为企业的经营决策、精细化运营提供支撑。

在目前的金融机构数据解决方案中，通常在不同的业务场景中，基于各自业务系统建立各自的数据库，用户需要从不同的数据库里面抽取数据，再进行加工应用，整个数据加工过程往往比较繁琐、且容易出错，成本高、效率低。

发明内容

本发明的目的在于提供一种基于大数据技术架构的数据中台服务体系，通过设置的数据集成模块，能稳定、快速的收集数据，从而减少了数据加工过程中出错的情况，通过设置的数据储存加工模块，能快速的对收集的数据进行处理、加工，从而提高了数据加工的效率，通过设置的数据处理模块，能将数据进行转化、处理、保护，从而进一步提高了数据加工的效率，降低了数据加工的成本，解决了上述现有技术中存在的问题。

为达上述目的，本发明是通过以下技术方案实现的：

一种基于大数据技术架构的数据中台服务体系，包括数据集成模块、数据存储加工模块、数据处理模块、应用分析模块和用户访问模块；

数据集成模块能快速、稳定的进行数据收集，并快速的对收集的数据进行处理，数据存储加工模块能对数据集成模块收集的数据进行加工、储存，数据处理模块能对加工储存后的数据进行转化、处理、保护，应用分析模块对处理后的数据进行分析、整合，用户访问模块能根据用户的使用方式，使用户能快速访问整合后的数据。

可选的，数据集成模块能对收集后的数据进行快速处理，能对离线、结构化、非结构化的数据进行收集与交换，数据集成模块包括数据网关模块，数据网关模块基于SpringCloud微服务框架和自研高速处理引擎，实现高效、稳定、灵活的数据集成、同步、服务，数据网关模块能进行调度管理，支持关系型数据库、内存数据库、大数据存储，实现数据的高速处理。

可选的，数据储存加工模块能从业务系统及外部机构处获取数据，进行统一加工存储，数据储存加工模块连接有前台业务系统模块和分析型应用模块，数据加工模块包括数据源模块、数据缓冲模块、数据操作模块、整合模型模块、共性加工模块和数据集市模块。