[发明专利]大数据管控平台

摘要

本发明提供一种大数据管控平台，包括：资源管理模块，用于调度和分配集群的内存和计算等资源给上层应用和服务，管理运行在集群节点上的任务的生命周期和资源使用；安全管理模块，用于提供以用户为单位的身份认证和授权，对集群数据资源和服务进行访问控制生成；远程过程调用模块，用于提供可靠高效的进程间远程调用服务；分布式协同服务模块，用于提供分布式系统基本的命名服务、状态同步服务和分布式锁服务；任务调度模块，用于面向海量数据处理和大规模计算类型的复杂应用，提供数据驱动的多级流水线并行计算框架；集群部署与监控模块，用于提供整个云操作系统以及上层应用服务的部署、配置管理以及服务的自检和自举。