[发明专利]一种基于分布式系统的文件处理方法、装置及系统

权利要求书

1.一种基于分布式系统的文件处理方法，其特征在于，包括以下步骤：

客户端访问文件时，根据文件大小，确定对应的访问目标对象并从所述访问目标对象中获取对应的文件。

2.根据权利要求1所述的方法，其特征在于，所述访问目标对象包括元数据服务器、数据处理服务器。

3.根据权利要求2所述的方法，其特征在于，客户端访问文件时，根据文件大小，确定对应的访问目标对象并从所述访问目标对象中获取对应的文件之前，还包括：

预先将小于预设文件大小的文件写入文件元数据的扩展属性并将所述文件元数据存储至元数据服务器。

4.根据权利要求3所述的方法，其特征在于，客户端访问文件时，根据文件大小，确定对应的访问目标对象并从所述访问目标对象中获取对应的文件的过程为：

若所述文件大小小于预设文件大小，则所述客户端从元数据服务器中获取与小于预设文件大小的文件对应的文件元数据；

所述客户端从文件元数据的扩展属性中获取对应的文件并进行读取访问。

5.根据权利要求2所述的方法，其特征在于，客户端访问文件时，根据文件大小，确定对应的访问目标对象并从所述访问目标对象中获取对应的文件的过程为：

若所述文件大小大于或等于预设文件大小，则所述客户端从元数据服务器中获取与大于或等于预设文件大小的文件对应的文件元数据；

所述客户端从数据处理服务器中获取大于或等于预设文件大小的文件并进行读取访问。

6.根据权利要求1所述的方法，其特征在于，客户端访问文件时，根据文件大小，确定对应的访问目标对象并从所述访问目标对象中获取对应的文件之后，还包括：

所述客户端根据从不同的访问目标对象中获取的文件，确定对应的访问方式。

7.根据权利要求6所述的方法，其特征在于，所述客户端根据从不同的访问目标对象中获取的文件，确定对应的访问方式过程为：

若所述客户端从元数据服务器中获取的文件元数据的扩展属性中获取对应的文件，则将所述文件直接加载至内存中进行读取访问。

8.根据权利要求6所述的方法，其特征在于，所述客户端根据从不同的访问目标对象中获取的文件，确定对应的访问方式过程为：

若所述客户端从数据处理服务器中获取大于或等于预设文件大小的文件，则将所述文件分割成预设份数后，按顺序加载至内存中进行顺序读取访问。

9.一种基于分布式系统的文件处理装置，其特征在于，包括目标对象确定模块、文件获取模块；其中，所述目标对象确定模块与所述文件获取模块相连；

所述目标对象确定模块，用于访问文件时，根据文件大小，确定对应的访问目标对象并将确定的所述访问目标对象发送至所述文件获取模块；

所述文件获取模块，用于从所述访问目标对象中获取对应的文件。

10.一种基于分布式系统的文件处理系统，其特征在于，包括客户端、元数据服务器、数据处理服务器；其中，所述客户端分别与所述元数据服务器、所述数据处理服务器相连；

所述客户端，用于若所述文件大小小于预设文件大小，则从元数据服务器中获取与小于预设文件大小的文件对应的文件元数据；还用于从文件元数据的扩展属性中获取对应的文件并进行读取访问；

用于若所述文件大小大于或等于预设文件大小，则从元数据服务器中获取与大于或等于预设文件大小的文件对应的文件元数据；还用于从数据处理服务器中获取大于或等于预设文件大小的文件并进行读取访问；

所述文件元数据，用于存储文件元数据；

所述数据处理服务器，用于存储大于或等于预设文件大小的文件。