[发明专利]一种高可用的大数据平台在审
| 申请号: | 201810375776.X | 申请日: | 2018-04-25 |
| 公开(公告)号: | CN108763310A | 公开(公告)日: | 2018-11-06 |
| 发明(设计)人: | 魏素扬 | 申请(专利权)人: | 江苏鸣鹤云科技有限公司 |
| 主分类号: | G06F17/30 | 分类号: | G06F17/30 |
| 代理公司: | 北京东方灵盾知识产权代理有限公司 11506 | 代理人: | 王君昌 |
| 地址: | 224000 江苏省盐城市城南新*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | 本发明公开了一种高可用的大数据平台,包括:支架服务器和布置在所述支架服务器上的平台系统集群,所述平台系统集群包括:数据存储子平台系统;数据集成子平台系统;数据计算子平台系统;智能全文检索子平台系统和统一运维监测子平台系统,所述统一运维监测子平台系统统一的安装部署及运维监测管理。根据本发明的高可用的大数据平台,是一个高可用大大数据平台及统一的运维监测系统,从数据采集,存储,计算分析,可视化检索,统一运维监测管理的高可用的大数据系统。从数据采集系统到数据到数据可视化形成有效的完整的体系,减少一般的大数据平台不能形成完整的闭环,造成数据丢失,数据分析不完整的弊端。 | ||
| 搜索关键词: | 子平台 大数据 可用 运维 监测管理 平台系统 可视化 统一 集群 支架 服务器 数据采集系统 闭环 数据到数据 计算分析 监测系统 全文检索 数据采集 数据存储 数据丢失 数据分析 数据集成 数据计算 数据平台 监测 检索 存储 智能 部署 | ||
【主权项】:
1.一种高可用的大数据平台,其特征在于,包括:支架服务器和布置在所述支架服务器上的平台系统集群,所述平台系统集群包括:数据存储子平台系统;数据集成子平台系统,所述数据集成子平台系统通过Agent客户端实时采集数据,通过Flume将数据及时传送至Kafka集群,同时不同网络位置Kafak集群将采集数据实时发送至数据存储平台系统;数据计算子平台系统,所述数据计算子平台系统通过MapReduce离线计算,Storm计算流数据框架做数据统计分析,数据关联挖掘和模型预测功能,使用异步通信框架对海量数据,数学建模迭代求优,获取最优参数模型,再使用模型参数预测未来发展趋势,以便于精准控制和智能决策;智能全文检索子平台系统,所述智能全文检索子平台系统使用自然语言处理技术,倒排序算法实现数据内容全文检索;统一运维监测子平台系统,所述统一运维监测子平台系统统一的安装部署及运维监测管理。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏鸣鹤云科技有限公司,未经江苏鸣鹤云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810375776.X/,转载请声明来源钻瓜专利网。





