[发明专利]基于分布式集群的数据处理方法与系统有效
| 申请号： | 201711079128.1 | 申请日： | 2017-11-06 |
| 公开（公告）号： | CN107943615B | 公开（公告）日： | 2020-08-18 |
| 发明（设计）人： | 王少鹏;张展国;贺彪;李洪普;郭祥汝;杨迎春;丁博;张晓波;茹东武;岳振亚;徐大青 | 申请（专利权）人： | 许继集团有限公司;国家电网公司;许昌许继软件技术有限公司 |
| 主分类号： | G06F11/14 | 分类号： | G06F11/14;G06F16/27 |
| 代理公司： | 郑州睿信知识产权代理有限公司 41119 | 代理人： | 崔旭东 |
| 地址： | 461000 河*** | 国省代码： | 河南;41 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 基于 分布式 集群 数据处理 方法 系统 | ||
1.一种基于分布式集群的数据处理方法，其特征在于，同个数据分区下的所有数据块的各个备份数据中，以数据分区为单位，第一个备份数据存储在所在的数据节点内，其他各备份数据分别存储在其他数据节点中数据分区最少的两个数据节点内，分别称为第一备份节点和第二备份节点；当数据分区服务器发生宕机或不提供服务时，转移数据分区到第一备份节点和第二备份节点中数据分区较少的数据节点内；
如果在其他数据节点中找不到数据分区最少的两个数据节点，那么，在其他数据节点中随机选择两个数据节点。
2.根据权利要求1所述的基于分布式集群的数据处理方法，其特征在于，在数据分区转移之后，在没有当前数据分区备份数据的各数据节点中找到数据分区最少的数据节点，作为补全目标节点，以数据分区为单位将当前数据分区的所有数据块的备份数据存储到所述补全目标节点内。
3.一种基于分布式集群的数据处理系统，其特征在于，包括用于执行以下处理策略的处理模块：同个数据分区下的所有数据块的各个备份数据中，以数据分区为单位，第一个备份数据存储在所在的数据节点内，其他各备份数据分别存储在其他数据节点中数据分区最少的两个数据节点内，分别称为第一备份节点和第二备份节点；当数据分区服务器发生宕机或不提供服务时，转移数据分区到第一备份节点和第二备份节点中数据分区较少的数据节点内；
如果在其他数据节点中找不到数据分区最少的两个数据节点，那么，在其他数据节点中随机选择两个数据节点。
4.根据权利要求3所述的基于分布式集群的数据处理系统，其特征在于，在数据分区转移之后，在没有当前数据分区备份数据的各数据节点中找到数据分区最少的数据节点，作为补全目标节点，以数据分区为单位将当前数据分区的所有数据块的备份数据存储到所述补全目标节点内。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于许继集团有限公司;国家电网公司;许昌许继软件技术有限公司，未经许继集团有限公司;国家电网公司;许昌许继软件技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201711079128.1/1.html，转载请声明来源钻瓜专利网。
