[发明专利]元数据文件格式转换方法

说明书

技术领域

本发明涉及分布式存储系统，更具体地，涉及元数据文件格式转换方法。

背景技术

在分布式存储系统中，元数据服务器通过操作元数据文件向其他节点提供服务，元数据文件保存着存储系统中所有文件的信息(大小、布局等)，作用相当重要。

在分布式存储系统中，这些信息被组织成一定格式的文件存放在本地文件系统(如ext3)中，其被称为元数据文件，例如其中存放文件系统超级块信息的文件和存放文件inode信息的文件等。这些文件的格式一般很少变化，但是随着文件系统功能的扩展，旧的文件格式无法满足新的需求，这时就需要对旧的元数据文件格式进行调整，既要转变文件格式，又要保护已有的数据信息。

元数据格式转换面临一些问题：首先就是数据安全，即，在转换过程中如何保证已有的数据能够完整的保存到新的文件中去，转换过程比较复杂，可能有许多突发状况(诸如断电、系统宕机等)威胁数据安全；其次就是转换速度，运行时间长的存储系统元数据文件很庞大，转换所需要的时间也较长。

针对相关技术中的问题，目前尚未提出有效的解决方案。

发明内容

针对相关技术中的问题，本发明旨在提供一种安全可靠的元数据文件转换思想和方法，使这种转换能快速地完成，并严格保证用户数据的安全。

根据本发明的实施例，提供了一种元数据文件格式转换方法，包括以下步骤：将元数据文件进行备份；以及采用多线程处理方式来对元数据文件的格式进行转换。

优选地，在进行格式转换之后，该方法还包括清理备份数据的步骤。

优选地，将所述元数据文件进行备份包括：用户提供远程主机的地址和路径并将元数据文件拷贝到所述路径。

优选地，将元数据文件进行备份包括：用户提供其他存储介质并将元数据文件拷贝到存储介质中。

优选地，将元数据文件进行备份包括：在本地对元数据文件进行备份。

优选地，采用多线程处理方式来对元数据文件的格式进行转换包括：主线程将元数据文件分派给多个子线程；以及多个子线程对分派给自己的元数据文件进行格式转换。

优选地，主线程将元数据文件分派给多个子线程包括：主线程获取文件系统并扫描文件系统的目录结构来获取其中的元数据文件；主线程根据子线程的数目对元数据文件的文件名进行哈希计算来获取一个数值X，其中1≤X≤NR，NR为子线程的数目；以及主线程将元数据文件的文件名放入ID等于X的子线程的工作队列中。

优选地，多个子线程对分派给自己的元数据文件进行格式转换包括：子线程从自己的工作队列中获取元数据文件的文件名；子线程分析元数据文件的类型；以及子线程调用相应的处理接口对元数据文件的格式进行转换。

更优选地，多个子线程在处理一个文件系统之后，调用操作系统的同步命令来同步磁盘数据，并根据设定的备份方式来删除旧的文件。

更优选地，将元数据文件的路径名进行拆分，将文件名的共有部分在内存中只存储一份，在查找元数据文件时将路径名的共有部分与特有部分进行合并来得到完整的路径名。

本发明通过进行数据备份和使用多线程并发操作，从而保证了数据安全并尽量缩短了转换时间。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据本发明实施例的元数据文件格式转换方法的流程图；以及

图2是根据本发明实施例的分派和转换的示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员所获得的所有其他实施例，都属于本发明保护的范围。

以下，参照附图详细描述本发明。

图1示出了根据本发明实施例的元数据文件格式转换方法的流程图。

参照图1，根据本发明实施例的元数据文件格式转换方法包括以下步骤：S102，将元数据文件进行备份；以及S104，采用多线程处理方式来对元数据文件的格式进行转换。以下进行具体描述。