[发明专利]一种政务数据接入治理系统

权利要求书

1.一种政务数据接入治理系统，包括数据源整合模块，其特征在于：所述数据源整合模块内设置有政务数据元数据管理模块，所述政务数据元数据管理模块内设有数据去重模块、数据要素补齐模块、数据关联模块、数据格式统一模块、数据映射模块、数据字典转义模块、无效数据删除模块和数据脱敏模块，所述数据来源整合模块上连接有数据资源池模块。

2.根据权利要求1所述的一种政务数据接入治理系统，其特征在于：所述数据去重模块内设置有企业工商注册数据去重模块内设有企业名称重复数据模块、工商内部编码重复数据模块、工商注册号重复数据模块和统一社会信用码重复数据模块，所述企业名称重复数据模块、工商内部编码重复数据模块、工商注册号重复数据模块和统一社会信用码重复数据模块共同连接有待去重数据集模块，所述待去重数据集模块连接有数据集去重模块。

3.根据权利要求2所述的一种政务数据接入治理系统，其特征在于：所述待去重数据集模块的去重步骤包括：

S1、循环待去重数据集然后根据去重逻辑(状态一致、四项中两项重复)生成六种case情况；

S2、采用HashSet的数据结构存储存储重复情况，这样既能利用HashSet不可重复的特点减少集合数据量，又能利用HashSet快速查找的特点快速判断重复；

S3、循环待去重数据集判断重复case是否在HashSet中，如果在则判断除企业状态外的另两项指标是否为null，若都不为null,则将case中的指标存储在删除集合(delCollection)中，同时保存当前待去重数据集的下标到插入数据集合(insertCollection)，同时继续循环，忽略后续case判断，若所有的case判断都不符合则将六种case存储到HashSet中；

S4、待去重数据集循环结束后循环删除集合(delCollection)采用多线程的方式将企业注册数据中符合条件的重复数据全部删除，然后循环插入数据集合(insertCollection)根据集合中的下标从待去重数据集获取数据，最后将此数据插入到企业工商注册数据中。

4.根据权利要求2所述的一种政务数据接入治理系统，其特征在于：所述企业工商注册数据包括工商内部编码、统一社会信用代码、企业名称、工商注册号、企业状态。

5.根据权利要求1所述的一种政务数据接入治理系统，其特征在于：所述数据源包括两大类：第一种、各级政府部门因履职过程产生的数据资源；第二种、包含服务过程中采集的外部数据资源。

6.根据权利要求3所述的一种政务数据接入治理系统，其特征在于：所述六种case情况包括：case1＝工商内部编码、统一社会信用码、企业状态；case2＝工商内部编码、企业名称、企业状态；case3＝工商内部编码、工商注册号、企业状态；case4＝统一社会信用码、企业名称、企业状态；case5＝统一社会信用码、工商注册号、企业状态；case6＝企业名称、工商注册号、企业状态。