[发明专利]一种资源文件的发送方法及装置

说明书

技术领域

本发明涉及云计算领域，具体而言，涉及一种资源文件的发送方法及装置。

背景技术

云计算作为一种基于互联网的、大众参与的、以服务方式提供的新型计算模式，其目的是实现资源分享与整合。随着云计算的兴起，同质化资源聚合及共享势在必行。云应用资产库是云计算平台用来积累和共享资源（虚拟机模板、云应用模板、ISO镜像等）的重要部分。基于S3（Simple StorageService，简单存储服务）实现的存储提供线性扩展能力，而且无需关注底层存储实现细节，是业界构建云应用资产库的常用技术方案。在云计算环境中，运行期间相关资源文件通常在NFS（Network File System，网络文件系统）进行存储，所述资源文件无法在S3服务器直接启动运行，且相关资源文件大小通常为GB级。因此，如何将共享资源文件快速从S3服务器迁移到NFS存储中，是需要解决的问题。在实际使用过程中两者文件存取协议不同，且两存储服务都不具备主动推送或拉取数据的能力，因此需要一个中转器进行协议转换。现有技术手段是采用独立部署的中转服务传输。即中转服务在接收到用户资源使用请求后，首先从S3服务器请求获取对应的资源文件，等待文件下载本地完毕后，再将该文件上传至NFS存储，如图1所示。由于该方式等待整个文件下载到本地才向NFS存储上传，中转方等待文件下载到本地时，传输通道处于闲置状态，导致整体传输效率低。此外，由于中转方将等待文件完全下载到本地，需要中转空间大，尤其是多用户并发进行资源请求。

发明内容

本发明提供了一种资源文件的发送方法及装置，用于解决现有技术中从S3服务器将资源文件发送至NFS服务器效率较低的问题。

根据本发明的一个方面，提供了一种资源文件的发送方法，包括：向S3服务器发送获取资源文件的请求消息；在接收资源文件的过程中，对接收中的所述资源文件进行拆分，生成发送文件块；使用多个物理通道实时地将生成的文件块发送至NFS服务器。

进一步地，上述方法还包括：在使用多个物理通道实时地将生成的文件块发送至NFS服务器之后，从内存及本地存储中删除发送成功的文件块。

进一步地，上述方法还包括：根据配置文件确定所述获取资源文件请求接收线程的个数、所述资源文件拆分的最大文件块以及最小文件块的大小、资源文件发送的线程个数、物理通道个数。

其中，所述对接收中的所述资源文件进行拆分包括：判断是否有空闲的物理通道；当有空闲的物理通道时，将接收到的资源文件拆分为最小文件块，当无空闲的物理通道时，将接收到的资源文件拆分为最大文件块。

其中，所述对接收中的所述资源文件进行拆分包括：对拆分后的文件块进行编号并且为最后一个文件块加结束符。

根据本发明的另一个方面，提供了一种资源文件的发送装置，包括：第一发送模块，用于向S3服务器发送获取资源文件的请求消息；生成模块，用于在接收资源文件的全过程中，对接收中的所述资源文件进行拆分，生成发送文件块；第二发送模块，用于使用多个物理通道实时地将生成的文件块发送至NFS服务器。

进一步地，上述所述装置还包括：删除模块，用于在使用多个物理通道实时地将生成的文件块发送至NFS服务器之后，从内存及本地存储中删除发送成功的文件块。

进一步地，上述所述装置还包括：确定模块，用于根据配置文件确定所述获取资源文件请求接收线程的个数、所述资源文件拆分的最大文件块以及最小文件块的大小、资源文件发送的线程个数、物理通道个数。

其中，上述所述生成模块包括：判断单元，用于判断是否有空闲的物理通道；拆分单元，用于当有空闲的物理通道时，将接收到的资源文件拆分为最小文件块，当无空闲的物理通道时，将接收到的资源文件拆分为最大文件块。

其中，上述生成模块包括：编号单元，用于对拆分后的文件块进行编号并且为最后一个文件块加结束符。

本发明的技术方案，由于在接收文件的过程中，直接将接收中的文件拆分为文件块，可以实时地将接收到的资源文件发送至NFS服务器，提高了发送效率，同时，由于使用多个物理通道将拆分好的文件块实时地发送至NFS服务器，可以并行地对文件块进行发送，进一步提高了从S3服务器将资源文件发送至NFS服务器的效率。

附图说明

图1是根据本发明现有技术的S3服务器将资源文件发送至NFS服务器的示意图；

图2是本发明的资源文件的发送方法的流程图；

图3是本发明在进行资源文件发送之前的初始化流程图；

图4是本发明资源文件的具体流程图；