[发明专利]一种政务大数据的可靠储存方法及装置在审
申请号: | 201810643057.1 | 申请日: | 2018-06-21 |
公开(公告)号: | CN109040173A | 公开(公告)日: | 2018-12-18 |
发明(设计)人: | 马莉;杨文茵 | 申请(专利权)人: | 佛山科学技术学院 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;H04L29/06 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 王国标 |
地址: | 528000 广东省佛山市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 大数据 二维码图片 编号文件 文件分割 储存 读取 存储安全性 存储服务器 分布式存储 现代自动化 分割数据 数据分割 网络爬虫 依次读取 二维码 索引 存储 合成 对抗 攻击 转换 | ||
1.一种政务大数据的可靠储存方法,其特征在于,所述方法包括以下步骤:
政务大数据分布式存储:
步骤1,将政务大数据转换成二维码图片数据;
步骤2,将二维码图片数据分割成N个子数据;
步骤3,将N个子数据分别存储在云存储服务器的N个存储节点中;
步骤4,生成分割编号文件;
步骤5,将分割编号文件存储在云存储服务器的任意一个存储节点中;
政务大数据读取与合成:
步骤6,读取分割编号文件;
步骤7,按照分割编号文件依次在各个存储节点中读取N个子数据;
步骤8,将N个子数据合并还原为二维码图片;
步骤9,将二维码图片数据还原为政务大数据;
其中,所述云存储服务器包括M个存储节点,M≥N+1,N、M为正整数。
2.根据权利要求1所述的一种政务大数据的可靠储存方法,其特征在于,在步骤1中,所述将政务大数据转换成二维码形式的图片数据方法的步骤为:
步骤1.1,将政务大数据按照标准二维码编码规则进行编码;
步骤1.2,将编码生成二维码矩阵;
步骤1.3,将二维码矩阵渲染成二维码图片数据。
3.根据权利要求1所述的一种政务大数据的可靠储存方法,其特征在于,在步骤2中,将二维码图片数据分割成N个子数据的方法为:将二维码图片数据量的大小P除以N得到L,如果没有余数R则生成N个等量的大小为L的子数据,如果有余数R则生成N-1个大小为L的子数据和1个大小为L+R的子数据。
4.根据权利要求1所述的一种政务大数据的可靠储存方法,其特征在于,在步骤3中,所述存储节点用于存储数据,每个存储节点都有唯一的节点编号,随时能够响应读取操作。
5.根据权利要求1所述的一种政务大数据的可靠储存方法,其特征在于,在步骤4中,所述分割编号文件包括所有的子数据的分割编号、分割顺序编号、子数据存储的存储节点编号、子数据的总数量。
6.根据权利要求1所述的一种政务大数据的可靠储存方法,其特征在于,在步骤7中,所述按照分割编号文件依次在各个存储节点中读取N个子数据的方法为:根据分割顺序编号、子数据存储的存储节点编号、子数据的总数量读取分布式存储在各存储节点中的子数据。
7.根据权利要求1所述的一种政务大数据的可靠储存方法,其特征在于,在步骤8中,将N个子数据合并还原为二维码图片的方法为:根据分割编号文件中的子数据的分割编号、数据的总数量,按照分割顺序编号依次将N个子数据合并还原为二维码图片。
8.一种政务大数据的可靠储存装置,其特征在于,所述装置包括:存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序运行在以下装置的单元中:
二维码转换单元,用于将政务大数据转换成二维码图片数据;
图片分割单元,用于将二维码图片数据分割成N个子数据;
分布式存储单元,用于将N个子数据分别存储在云存储服务器的N个存储节点中;
编号生成单元,用于生成分割编号文件;
编号存储单元,用于将分割编号文件存储在云存储服务器的任意一个存储节点中;
编号读取单元,用于读取分割编号文件;
子数据读取单元,用于按照分割编号文件依次在各个存储节点中读取N个子数据;
合并还原单元,用于将N个子数据合并还原为二维码图片;
大数据还原单元,用于将二维码图片数据还原为政务大数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于佛山科学技术学院,未经佛山科学技术学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810643057.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种照片发送方法及装置
- 下一篇:服务器IP的动态选择方法及系统