[发明专利]Hadoop集群测试的方法

说明书

Hadoop集群测试的方法，对分布式存储系统不同大小文件进行读写操作及文件校验，检测服务器产品搭配hadoop分布式存储系统功能是否正常，具体包括以下方式：获取不同容量大小的文件的md5值；删除已获取过md5值的文件；获取新文件的md5值；将新获取文件的md5值与原文件的md5值进行比较，根据比较结果判断文件是否正常；如果正常，则进行下一步操作，否则停止测试并输出结果；将文件保存为多份；判断多份文件的md5值是否一致，根据判断结果判断分布式存储系统是否正常。

技术领域

本发明涉及分布式存储系统测试技术领域，具体地说是一种Hadoop集群测试的方法。

背景技术

随着互联网的到来，服务器已经应用到各个行业领域，各类应用的需要造就了不同集群的产生；大数据的时代服务器需求数量呈现出直线上涨的趋势，各行各业对服务器产生了不同的应用需求及需求数量的增加，为满足产品可靠性、稳定性测试需求需要，服务器研发需要引入集群部署及应用测试方案。

发明内容

本发明的目的在于提供一种Hadoop集群测试的方法，用于检测服务器产品搭配hadoop分布式存储系统功能是否正常。

本发明解决其技术问题所采取的技术方案是：

Hadoop集群测试的方法，对分布式存储系统不同大小文件进行读写操作及文件校验，检测服务器产品搭配hadoop分布式存储系统功能是否正常，具体包括以下方式：

获取不同容量大小的文件的md5值；

删除已获取过md5值的文件；

获取新文件的md5值；

将新获取文件的md5值与原文件的md5值进行比较，根据比较结果判断文件是否正常；如果正常，则进行下一步操作，否则停止测试并输出结果；

将文件保存为多份；

判断多份文件的md5值是否一致，根据判断结果判断分布式存储系统是否正常。

进一步地，在获取不同容量大小的文件的md5值之前需要删除/home/hadoop下面以file开头的所有文件。

进一步地，已获取过md5值的文件包括/home/hadoop下面的以md5sum开头的文件。

进一步地，在删除已获取过md5值的文件的同时，还需要删除/home下面以file开头的文件。

进一步地，在获取新文件的md5值之前还需要将创建好的文件上传到hadoop，并从hadoop下载文件到本地/home目录。

进一步地，将新获取文件的md5值与原文件的md5值进行比较，根据比较结果判断系统功能是否正常具体为：

如果新获取文件的md5值与原文件的md5值相同，则表示系统功能正常；

如果新获取文件的md5值与原文件的md5值不相同，则表示系统功能不正常。

进一步地，判断多份文件的md5值是否一致之前还包括：

分别进入多份文件并获取本地保存文件的md5值并拷贝到Master主机的/home目录。

进一步地，根据判断结果判断分布式存储系统是否正常具体为：

如果多份文件的md5值一致，则表示分布式存储系统正常，如果不一致，则表示分布式存储系统不正常；

输出测试结果。

以上发明内容提供的仅仅是本发明实施例的表述，而不是发明本身。