[发明专利]一种分布式数据处理方法、数据中心及其系统有效
| 申请号: | 201310228569.9 | 申请日: | 2013-06-05 |
| 公开(公告)号: | CN103327085B | 公开(公告)日: | 2017-02-08 |
| 发明(设计)人: | 罗代均 | 申请(专利权)人: | 深圳市中博科创信息技术有限公司 |
| 主分类号: | H04L29/08 | 分类号: | H04L29/08;H04L29/06 |
| 代理公司: | 深圳华奇信诺专利代理事务所(普通合伙)44328 | 代理人: | 曲卫涛 |
| 地址: | 518063 广东省深圳市*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 分布式 数据处理 方法 数据中心 及其 系统 | ||
1.一种分布式数据处理方法,其特征在于,包括:
数据中心获取原始数据;
所述数据中心对所述原始数据进行切片处理,生成至少两个数据块,
对所述每个数据块进行加密处理,生成N个子数据块,N为大于2的正整数,
对所述N个子数据块进行纠删处理,生成M份子数据,其中,M为大于N的正整数,所述M份子数据中的N份子数据可用于还原为原始数据,
将所述M份子数据中至少N份子数据存储于所述数据中心,剩余子数据存储于分布式数据集群系统的其他数据中心。
2.根据权利要求1所述的方法,其特征在于,所述方法,还包括:
所述集群系统中的任意数据中心接收还原原始数据的请求,
所述接收还原原始数据请求的数据中心利用自身存储的子数据进行纠删处理,还原得到原始数据,如果还原原始数据失败,则从集群系统中存储有子数据的其他数据中心获取还原原始数据所需要的子数据,并进行纠删处理,还原得到原始数据。
3.根据权利要求1或2所述的方法,其特征在于,将所述获取原始数据的数据中心或存储有最多份子数据的数据中心设置为中心数据中心,所述集群系统中的其他数据中心为从数据中心,所述方法进一步包括:
所述中心数据中心与从数据中心在带宽比较闲的时候进行子数据的传输。
4.根据权利要求3所述的方法,其特征在于,所述中心数据中心与从数据中心进行子数据传输,包括:
中心数据中心获取从数据中心不再保存的子数据,或者,
中心数据中心将子数据存储于从数据中心。
5.一种数据中心,其特征在于,包括至少一个服务器,所述服务器包括:
获取单元,用于获取原始数据或从其他数据中心获取子数据;
切片单元,用于对所述原始数据进行切片处理,生成至少两个数据块,
加密单元,用于对所述每个数据块进行加密处理,生成N个子数据块,其中,N为大于2的正整数
纠删单元,用于对所述N个子数据块进行纠删处理,生成M份子数据,其中,所述M份子数据中的N份子数据可用于还原为原始数据,M为大于N的正整数,
存储单元,用于存储所述M份子数据中的至少N份子数据,或者,存储从其他数据中心获取的子数据;
发送单元,用于将所述M-N份子数据发送至其他数据中心。
6.根据权利要求5所述的数据中心,其特征在于,所述服务器,还包括:
还原单元,用于接收还原原始数据的请求,并利用所述存储单元存储的子数据进行纠删处理,还原得到原始数据,如果还原原始数据失败,则利用所述获取单元从存储有子数据的其他数据中心获取还原原始数据所需要的子数据及所述存储单元存储的子数据,并进行纠删处理,还原得到原始数据。
7.一种分布式数据集群系统,包括,中心数据中心及从数据中心,其特征在于,所述中心数据中心及从数据中心分别包括至少一个服务器,所述服务器包括:
获取单元,用于获取原始数据或从其他数据中心获取子数据;
切片单元,用于对所述原始数据进行切片处理,生成至少两个数据块,
加密单元,用于对所述每个数据块进行加密处理,生成N个子数据块,其中,N为大于2的正整数,
纠删单元,用于对所述N个子数据块进行纠删处理,生成M份子数据,其中,所述M份子数据中的N份子数据可用于还原为原始数据,M为大于N的正整数,
存储单元,用于存储所述M份子数据中的至少N份子数据,或者,存储从其他数据中心获取的子数据;
发送单元,用于将所述M-N份子数据发送至其他数据中心。
8.根据权利要求7所述的系统,其特征在于,所述获取原始数据的数据中心或存储有最多份子数据的数据中心为中心数据中心,所述集群系统中的其他数据中心为从数据中心,所述中心数据中心与从数据中心在宽带比较闲的时候进行子数据的传输。
9.根据权利要求7所述的系统,其特征在于,所述中心数据中心与从数据中心进行子数据传输,包括:
中心数据中心获取从数据中心不再保存的子数据,或者,
中心数据中心将子数据存储于从数据中心。
10.根据权利要求7至9任一项所述的系统,其特征在于,如果所述中心数据中心及从数据中心分别包括至少两个服务器,则,所述中心数据中心及从数据中心内的服务器通过局域网通信,所述所述中心数据中心及从数据中心间通过互联网进行通信。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市中博科创信息技术有限公司,未经深圳市中博科创信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310228569.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:防火门锁的可降低噪音装置
- 下一篇:用于立体车库载车板的稳定装置





