[发明专利]一种基于混合数据库的多业务用户数据管理系统及其方法

权利要求书

1.一种基于混合数据库的多业务用户数据管理系统，其特征在于，包括：

系统出口入口模块，所述出口入口模块用于导入和导出用户数据；

分布式处理模块，所述分布式处理模块包括对所述用户数据进行数据分类 的数据分类模块、对经分类后的用户数据进行筛选和清洗的数据筛分录入模块、 对经筛选和清洗后的用户数据进行基础整合的数据整合模块、对经基础整合后 的用户数据进行二次整合的数据查询模块；

数据存储集群，所述数据存储集群包括用于存储结构化数据的关系型数据 库集群，用于存储需要进行复杂计算的数据的Hadoop集群，用于存储非结构化 数据的MongoDB集群。

2.根据权利要求1所述的基于混合数据库的多业务用户数据管理系统，其 特征在于，所述系统入口出口模块包括数据接入模块和权限控制模块，所述数 据接入模块用于导入用户数据，所述权限控制模块用于处理外来请求权限校验 和数据导出。

3.根据权利要求1所述的基于混合数据库的多业务用户数据管理系统，所 述数据分类模块、数据筛选录入模块、数据查询模块、数据整合系统之间数据 的传输采用生产者消费者模式，并以Redisqueue作为集群消息队列。

4.根据前述权利要求中的任一项所述的基于混合数据库的多业务用户数据 管理系统，所述数据存储集群的关系型数据库集群为Redis集群。

5.一种基于混合数据库的多业务用户数据管理方法，其特征在于，包括如 下步骤：

S1：将用户数据导入到系统入口出口模块；

S2：对所述用户数据进行数据分类；

S3：对经分类后的用户数据进行筛选和清洗；

S4：对经筛选和清洗后的用户数据进行基础整合；

S5：对经基础整合后的用户数据进行二次整合；

S6：对经二次整合后的用户数据进行存储，其中结构化数据存储在关系型 数据库集群中，需要进行复杂计算的数据存储在Hadoop数据库集群中，非结构 化数据存储在MongoDB数据库集群中。

6.根据权利要求5所述的基于混合数据库的多业务用户数据管理方法，其特 征在于，步骤S6中所述的关系型数据库集群为Redis数据库集群。