[发明专利]大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法

权利要求书

1.一种大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的方法包括以下步骤：

(1)系统信息录入，记录系统基本情况；

(2)通过标准元数据采集工具采集技术元数据；

(3)通过模拟系统业务场景采集系统中的数据流向，从系统的业务场景为源点采集业务元数据；

(4)通过业务元数据的关联分析元数据链路；

(5)识别业务元数据与技术元数据的业务含义；

(6)通过对不同维度元数据进行聚类、汇总、统计排序的分析策略，分析数据能力、数据全景和数据热度。

2.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(1)的系统基本情况包括系统名称、系统编码、系统供应商、系统版本号、上线时间、数据库信息、业务特性、菜单信息和功能信息。

3.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(2)的采集技术元数据包含客户端和服务端两部分，客户端与应用系统数据库适配并采集数据，服务端对数据进行整合及可视化展现，描述数据库之间、表之间以及字段之间的关联关系。

4.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(3)中业务元数据的采集范围包括业务特性、菜单、功能、API、界面、表单、请求、SQL、表和字段。

5.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(4)具体包括以下步骤：

(4.1)对重复或相似的业务元数据进行合并；

(4.2)形成业务元数据的血缘分析、影响分析、全链分析。

6.根据权利要求5所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(4.2)具体为：

通过数据之间的关联性，对业务元数据进行链路分析，以掌握数据的影响程度，形成业务元数据的血缘分析、影响分析、全链分析。

7.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(5)具体包括以下步骤：

(5.1)将采集到的业务元数据与技术元数据充分结合，快速识别数据的业务含义；

(5.2)业务元数据与技术元数据通过表进行关联，并根据业务元数据中获取到的功能、界面、表单、请求、SQL和表之间的关联关系识别字段的业务含义，并回写至技术元数据中的字段内。

8.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(6)中的分析数据能力的步骤具体包括以下处理过程：

通过对业务元数据中的功能和表单，以及技术元数据中的表和字段进行聚类分析。

9.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(6)中的分析数据能力的步骤具体包括以下处理过程：

通过对元数据链路的汇总计算，展示系统中所有表之间的关联关系，形成系统数据全景图。

10.根据权利要求1所述的大数据治理中基于元数据和数据分析技术实现系统数据架构梳理的方法，其特征在于，所述的步骤(6)中的分析数据热度的步骤具体包括以下处理过程：

通过对系统中表的被关联的次数进行统计排序，找出被关联次数较多的表，将其作为系统的核心数据。