[发明专利]面向暂态电能质量综合评估的大数据分析系统在审
申请号: | 201711488467.5 | 申请日: | 2017-12-30 |
公开(公告)号: | CN109993385A | 公开(公告)日: | 2019-07-09 |
发明(设计)人: | 周峻松;徐继峰;祁建明;陈墩金 | 申请(专利权)人: | 广州明领基因科技有限公司 |
主分类号: | G06Q10/06 | 分类号: | G06Q10/06;G06Q50/06 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 510610 广东省广州市天河区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种面向暂态电能质量综合评估的大数据分析系统,该系统包括:数据源层模块、分布式文件管理层模块、大数据分布式处理层模块以及分布式数据挖掘层模块;其中,所述数据源层模块分别进行海量历史数据和实时流数据处理,用于分类器训练和实时分类过程;所述分布式文件管理层模块使用名字节点和数据节点的主从结构,为所述大数据分布式处理层模块提供高吞吐量的数据访问;所述大数据分布式处理层模块主要采用业界通用的MapReduce分布式计算框架,构造Reduce函数合并所有的具有相同中间key的中间value,并提交输出数据至所述分布式数据挖掘层模块;所述分布式数据挖掘层模块在MapReduce分布式计算框架的基础上,使用批量数据检索以及实时数据检索获取数据。 | ||
搜索关键词: | 大数据 分布式数据挖掘 分布式处理 分布式计算框架 分布式文件 管理层模块 分析系统 数据源层 综合评估 暂态 海量历史数据 实时数据检索 分类器训练 高吞吐量 函数合并 获取数据 模块提供 批量数据 实时分类 输出数据 数据访问 数据节点 主从结构 数据处理 实时流 通用的 检索 名字 | ||
【主权项】:
1.面向暂态电能质量综合评估的大数据分析系统,其特征在于,所述系统包括:数据源层模块、分布式文件管理层模块、大数据分布式处理层模块以及分布式数据挖掘层模块;其中,所述数据源层模块分别进行海量历史数据和实时流数据处理,用于分类器训练和实时分类过程;所述分布式文件管理层模块使用名字节点和数据节点的主从结构,为所述大数据分布式处理层模块提供高吞吐量的数据访问;所述大数据分布式处理层模块主要采用业界通用的MapReduce分布式计算框架,构造Reduce函数合并所有的具有相同中间key的中间value,并提交输出数据至所述分布式数据挖掘层模块;所述分布式数据挖掘层模块在MapReduce分布式计算框架的基础上,使用批量数据检索以及实时数据检索获取数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州明领基因科技有限公司,未经广州明领基因科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711488467.5/,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06 计算;推算;计数
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理