[发明专利]一种传输数据的方法

说明书

技术领域

本申请涉及通信技术领域，更具体地，涉及一种传输数据的方法。

背景技术

随着大数据时代的到来，迫切需要运算处理大规模数据的能力，而Hadoop作为具有分布式存储和计算能力的开源项目，很快就得到各个行业的重视。Hadoop是一个分布式系统基础架构。Hadoop实现了一个分布式文件系统。如今Hadoop已被广泛应用于商业、医疗、金融、教育等领域，并日益发挥着其重要作用。在Yahoo、eBay、百度等知名企业，Hadoop都充当着重要角色。

云存储行业方兴未艾，各种云平台服务也层出不穷，同时，大数据时代的到来，也为存储业带来了新的挑战。如何提高云存储的性能，是存储行业必须面对的问题。同时，各大门户网、社交网每天的数据已经突破数十TB，如何对这些数据进行处理，提取有用信息，是大家都非常关心的问题。

许多存储技术厂商的现有分布式存储系统还不具备云计算能力，如何将Hadoop与各个厂商自己的分布式存储系统相结合，使他们的分布式存储系统也具备云计算能力，目前还没有相应地解决方案。

发明内容

本发明实施例提出一种传输数据的方法，能够在现有的分布式存储系统的基础上实现云计算。

本发明实施例的技术方案如下：

一种传输数据的方法，所述方法包括：

由分布式存储系统替换Hadoop中自身的分布式文件系统；

替换后的Hadoop向下兼容，分布式存储系统向上兼容，替换后的Hadoop与分布式存储系统对接组成传输数据的接口；

替换后的Hadoop与分布式存储系统通过所述接口依据元数据进行云计算。

所述由分布式存储系统替换Hadoop中自身的分布式文件系统包括：

在Hadoop中删除自身的分布式文件系统的代码包和脚本；

根据分布式存储系统重写Hadoop的分布式文件系统脚本；

更改Hadoop的配置文件。

所述替换后的Hadoop向下兼容，分布式存储系统向上兼容，替换后的Hadoop与分布式存储系统对接组成传输数据的接口包括：替换后的Hadoop编写代码以实现向下兼容；

分布式存储系统编写代码以实现向上兼容；

替换后的Hadoop与分布式存储系统对接组成传输数据的接口。

所述替换后的Hadoop与分布式存储系统通过所述接口依据元数据进行云计算包括：

替换后的Hadoop与分布式存储系统通过所述接口，依据元数据从分布式存储系统的节点获取数据；

根据获取的数据进行云计算。

从上述技术方案中可以看出，在本发明实施例中由分布式存储系统替换Hadoop中自带的分布式文件系统；替换后的Hadoop向下兼容，分布式存储系统向上兼容，替换后的Hadoop与分布式存储系统对接组成传输数据的接口；替换后的Hadoop与分布式存储系统通过所述接口交互，进行云计算。通过开放接口，Hadoop能够在现有的分布式存储系统的基础上实现云计算。

附图说明

图1为传输数据的方法流程示意图；

图2为传输数据的实施例示意图。

具体实施方式

为使本发明的目的、技术方案和优点表达得更加清楚明白，下面结合附图及具体实施例对本发明再作进一步详细的说明。

在本发明实施例中，替换掉Hadoop自身的分布式文件系统，使其它分布式存储系统具备云计算能力，而不必依靠Hadoop自带的分布式文件系统。通过这样的技术手段，企业本身的分布式存储系统就能具备稳定、可靠、高效的云计算能力。

参见附图1是传输数据的方法流程示意图，具体包括以下步骤：

101、由分布式存储系统替换Hadoop中自身的分布式文件系统。

在Hadoop中存在Hadoop本身的分布式文件系统。为了保证在现有的分布式存储系统能够实现云计算，首先在Hadoop中删除自身的分布式文件系统的代码包和脚本；然后，再根据分布式存储系统重写Hadoop的分布式文件系统脚本。这样，在Hadoop中就可以建立与现有的分布式存储系统向对应的脚本，同时还需要更改Hadoop的配置文件，使Hadoop指向各个厂商自己的分布式文件系统。

102、替换后的Hadoop向下兼容，分布式存储系统向上兼容，替换后的Hadoop与分布式存储系统对接组成传输数据的接口。