[发明专利]一种存储系统在审
申请号: | 201510671810.4 | 申请日: | 2015-10-13 |
公开(公告)号: | CN105224256A | 公开(公告)日: | 2016-01-06 |
发明(设计)人: | 于涛;张在贵 | 申请(专利权)人: | 浪潮(北京)电子信息产业有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F17/30 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 存储系统 | ||
技术领域
本发明涉及存储技术领域,更具体地说,涉及一种存储系统。
背景技术
人类对地球气候的探索已经进入全新时代,大数据正在帮助研究人员存储、分析和处理气候数据,上演“预见未来”的壮举。以海洋预报为例,对相关海域进行数值天气预报,实现精确的预测,减少海洋灾害带来经济损失是海洋预报的一项重要任务。但是由于数值预报净度受到诸多因素的影响,如实测资料、模式参数、计算速度、存储方式等,其复杂性对大规模数据管理工作提出了挑战,尤其是对存储方式的要求很高,需要满足气象行业大数据应用的特点。
FVCOM是无结构三角形网格架构、有限体积、自由表面、三维原始方程海洋数值模型。它包含了多种物理、水质、生态计算模块。FVCOM模型基于Fortran90/95标准,且在MPI(MessagePassingInterface)的框架下实现计算并行化,可以在共享内存及分布式内存多计算节点的高性能计算机上实现并行快速模拟。
而对于运行FVCOM模型的高性能计算中生成的计算日志信息的存储及读取是保证顺利运行FVCOM模型的高性能计算的一个重要因素,现有技术中通常使用的存储系统包括管理节点、存储节点及计算节点,管理节点将计算任务下发至计算节点,计算节点运行与计算任务对应的FVCOM模型的高性能计算,并将计算日志信息存储至副本机制的存储节点,在存储成功之后再进行后续操作。但是,将计算日志信息存储至副本机制的存储节点的过程需要耗费大量的时间及系统性能,这并不利于整个系统的执行效率。
综上所述,现有技术中对于计算日志信息的处理存在耗费时间及系统性能较严重的问题。
发明内容
本发明的目的是提供一种存储系统,以解决现有技术中对于计算日志信息的处理存在的耗费时间及系统性能较严重的问题。
为了实现上述目的,本发明提供如下技术方案:
一种存储系统,包括管理节点及至少一个计算节点,其中,所述管理节点包括共享目录,所述共享目录通过NFS共享给每个所述计算节点,每个所述计算节点内挂载有所述共享目录;
每个所述计算节点将运行FVCOM的高性能计算中生成的计算日志信息存储至所述共享目录,或者由所述共享目录中读取所需的计算日志信息。
优选的,所述存储系统包括多个存储节点,用于运行FVCOM的高性能计算的源数据以及利用所述源数据运行FVCOM的高性能计算得到的对应的目标数据均存储在副本机制的所述存储节点中。
优选的,所述存储系统还包括备用管理节点,所述备用管理节点用于在所述管理节点发生故障无法正常工作时,代替所述管理节点完成所述管理节点需完成的工作。
优选的,每个所述计算节点中均包括挂载模块,所述挂载模块用于通过扫描确定所述共享目录,将所述共享目录挂载到对应的计算节点中,并将运行FVCOM的高性能计算中的计算日志信息的生成路径指定为所述共享目录。
优选的,所述管理节点包括共享模块,所述共享模块用于建立指定文件,将确定所述管理节点中的一目录为共享目录的共享命令写入所述指定文件中,并将所述共享目录共享给每个所述计算节点。
优选的,所述管理节点包括自动激活模块,所述自动激活模块用于在所述管理节点开机时自动指示所述共享模块将所述共享目录共享给每个所述计算节点。
优选的,所述共享模块包括删除单元,所述删除单元用于当所述管理节点中存在所述指定文件时,将所述指定文件进行删除,并指示所述共享模块建立新的指定文件。
本发明提供的一种存储系统,包括管理节点及至少一个计算节点,其中,所述管理节点包括共享目录,所述共享目录通过NFS共享给每个所述计算节点,每个所述计算节点内挂载有所述共享目录;每个所述计算节点将运行FVCOM的高性能计算中生成的计算日志信息存储至所述共享目录,或者由所述共享目录中读取所需的计算日志信息。与现有技术相比,本申请无需将生成的计算日志信息存储至副本机制的存储节点中后再进行其他计算,而是直接将计算日志信息存储至通过NFS共享的共享目录下,同时能够从共享目录中读取所需的计算日志信息,对于计算日志信息的处理速度得到明显提高,进一步节省了时间并提升了系统性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮(北京)电子信息产业有限公司,未经浪潮(北京)电子信息产业有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510671810.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种块虚拟化阵列的实现方法及装置
- 下一篇:一种文件存储的方法和装置