[发明专利]一种基于重组文件元数据实现快速文件切割和合并的方法

摘要

本发明公开了一种基于重组文件元数据实现快速文件切割和合并的方法，其实施步骤分为：扩展原有的POSIX文件操作接口，新增文件切割和合并接口；这两个扩展接口通过IOCTL的方式与操作系统内核进行交互；SplitFile接口的工作流程以及MergeFile接口的工作流程。本发明给需要进行文件切割、合并的应用带来方便；消除了文件切割和合并过程中的拷贝开销，这对分布式文件系统来说非常有效，消除了大量的I/O操作；大幅度提升了文件切割和合并这类应用的性能。

主权项

一种基于重组文件元数据实现快速文件切割和合并的方法，其特征在于：其实施步骤如下：I、扩展原有的POSIX文件操作接口，新增文件切割和合并接口SplitFile：char*newFileName，char*srcFileName，bool changeSrcFile，uint64offset，uint64length；参数说明：newFileName：切割后生成新文件的路径         srcFileName：被切割文件的路径         changeSrcFile：是否修改被切割文件的大小         offset：被切割文件的起始位置         length：被切割文件的切割长度功能说明：将srcFileName文件从位置offset开始，长度为length的部分切割出来生成一个新的文件newFileName，切割后新生成的文件大小为length；MergeFile：char*newFileName，bool deleteSubFile，char*subFilel，char*subFile2，char*subFile3，…；参数说明：newFileName：合并后生成新文件的路径          deleteSubFile：是否删除被合并文件          subFile1：被合并文件1          subFile2：被合并文件2          subFile3：被合并文件3功能说明：将subFile1、subFile2、subFile3等按照先后顺序合并成新文件newFileName，合并后新文件的大小是这些文件的总和；II、这两个扩展接口通过IOCTL的方式与操作系统内核进行交互；III、SplitFile接口的工作流程如下：a、应用程序调用SplitFile接口，操作系统打开需要切割的源文件；b、打开成功后，通过IOCTL的方式将新文件名newFileName，以及offset、length参数传到操作系统内核文件系统层；c、文件系统层根据参数，生成一个新的空文件，然后根据源文件的数据块映射信息中中需要切割的部分的块映射信息生成新文件的块映射信息，根据参数如果是直接改变源文件的内容，则修改源文件的块映射信息，如果是不改变源文件的内容，则将OSD中的块映射信息引用计数加1；d、对于引用计数当修改这类引用计数大于1的数据块时采用CopyOnWrite的方式，生成新的OSD数据块；e、修改源文件和新文件属性中的大小，给应用返回成功；IV、MergeFile接口的工作流程如下：a、应用程序调用MergeFile接口，先向文件系统中创建一个NewFileName的空文件；b、创建成功后，通过IOCTL的方式，将需要合并的文件参数发送到操作系统内核文件系统层；c、文件系统层根据需要合并的文件信息，依次获取它们的数据块分布信息，将这些分部信息写入到新文件的数据快分布信息中，如果deleteSubFile为TRUE，则删除所有的被合并文件的元数据信息；如果deleteSubFile为FALSE，则修改所有的相关OSD的数据块映射信息，使得引用计数加1；d、设置新文件的大小，给应用返回成功。