[发明专利]基于云存储的文件处理方法、系统及计算机设备

说明书

本发明实施例提供了一种基于云存储的文件处理方法，包括：向WEB服务器发送文件上传请求；接收所述服务器集群经由所述WEB服务器返回的的文件ID；对所述新文件进行切片，并为每个切片文件分配切片序号；根据每个切片文件的文件数据、文件ID、切片序号计算每个切片文件的切片ID，所述切片ID用于标识所述切片文件与待上传新文件的唯一对应关系；将所述切片文件数据包上传给WEB服务器，以通过所述WEB服务器将所述切片文件数据包中的每个切片文件的切片数据发送到所述服务器集群中的对应服务终端上进行存储。本发明实施例通过改进后的切片数据上传技术，避免资源浪费的同时，还避免了待上传文件和切片文件不一致的问题，有效保障了上传数据的正确性。

技术领域

本发明实施例涉及计算机数据处理领域，尤其涉及一种基于云存储的文件处理方法、系统、计算机设备及计算机可读存储介质。

背景技术

云存储是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量不同类型的存储设备通过应用软件集合在一起，实现协同工作，共同对外提供数据存储和业务访问功能。即当云计算系统运算和处理的核心是大量数据的存储和管理时，云计算系统就需要配置大量的存储设备，此时的云计算系统就转变为一个云存储系统，所以云存储系统就是一个以数据存储和管理为核心的云计算系统。这个存储系统由多个存储设备组成，通过集群功能、分布式文件系统或类似网格计算等功能联合起来协同工作，并通过一定的应用软件或应用接口，为用户提供一定类型的存储服务和访问服务。

现有的云存储方案一般是基于整个文件上传或基于切片数据上传。均存在一定的技术缺陷：(1)基于整个文件上传，容易造成资源的浪费，例如，当用户上传了一个较大的文件后，如果只修改了该文件的一小部分，此时仍需要重传整个文件；(2)基于切片数据上传，容易造成因误操作造成上传故障，例如，如果人为或系统的误操作把不同的待上传文件与切片文件对应关系弄混了，就有可能会出现待上传新文件与切片文件不一致的问题。

发明内容

有鉴于此，本发明实施例的目的是提供一种基于云存储的文件处理方法、系统、计算机设备及计算机可读存储介质，解决现有技术资源浪费和上传故障的技术问题。

为实现上述目的，本发明实施例提供了一种基于云存储的文件处理方法，包括以下步骤：

向WEB服务器发送文件上传请求，所述文件上传请求用于请求向服务器集群上传新文件；

接收所述服务器集群经由所述WEB服务器返回的的文件ID，所述文件ID 为所述服务器集群为所述新文件生成的；

对所述新文件进行切片，并为每个切片文件分配切片序号；

根据每个切片文件的文件数据、文件ID、切片序号计算每个切片文件的切片ID，所述切片ID用于标识所述切片文件与待上传新文件的唯一对应关系；

封装切片文件数据包，所述切片文件数据包中包含文件ID、每个切片文件的切片ID、每个切片文件的切片序号、每个切片文件的切片数据；及

将所述切片文件数据包上传给所述WEB服务器，以通过所述WEB服务器将所述切片文件数据包中的每个切片文件的切片数据发送到所述服务器集群中的对应服务终端上进行存储，其中，所述服务器集群用于保存所述文件ID、每个切片文件的切片ID及每个切片文件的切片序号的对应关系。

优选地，根据每个切片文件的文件数据、文件ID、切片序号计算每个切片文件的切片ID的步骤，包括：

将每个切片文件对应的文件数据、文件ID以及切片序号串接成字符串，及

根据每个切片对应的字符串，通过散列算法计算每个切片文件的切片ID。

优选地，根据每个切片文件的文件数据、文件ID、切片序号计算每个切片文件的切片ID的步骤，包括：

根据每个切片文件的文件数据，通过散列算法计算每个切片文件的切片初始值；及