[发明专利]分布式数据处理方法、装置及系统和机器可读介质在审
申请号: | 201880094801.5 | 申请日: | 2018-08-17 |
公开(公告)号: | CN112335217A | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 毛怿 | 申请(专利权)人: | 西门子股份公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 李慧 |
地址: | 德国*** | 国省代码: | 暂无信息 |
权利要求书: | 暂无信息 | 说明书: | 暂无信息 |
摘要: | 一种分布式数据处理方法、装置及系统和机器可读介质,该方法包括:将待处理的输入数据及相对应的map程序和reduce程序存储到星际文件系统IPFS上;从预先确定的至少两个计算节点中选择至少两个工作节点;控制每一个工作节点从IPFS上下载map程序和reduce程序中的至少一个,并控制下载了map程序的工作节点从IPFS上下载输入数据;利用至少两个工作节点,通过map程序和reduce程序对输入数据进行mapreduce处理,获得对应于输入数据的至少两个结果数据;将至少两个结果数据存储到IPFS,并分别获得每一个结果数据对应的第一存储地址信息;根据至少两个结果数据对应的至少两个第二存储地址信息获得对应于输入数据的输出数据的哈希值。该方法能够提高分布式数据处理的可用性。 | ||
搜索关键词: | 分布式 数据处理 方法 装置 系统 机器 可读 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西门子股份公司,未经西门子股份公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201880094801.5/,转载请声明来源钻瓜专利网。