[发明专利]文件数据访问方法、装置以及系统

说明书

技术领域

本发明涉及网络存储技术，尤其涉及一种文件数据访问方法、文件的元数据发送方法、装置以及系统。

背景技术

随着计算机网络和信息技术的飞速发展，全球信息存储容量急剧增长，同时网络存储技术不断发展，分布式存储运用广泛，网络规模不断扩大，访问节点越来越多。在很多的应用中，例如WEB 2.0，数据量十分巨大，但是通常只有少部分内容访问频繁，大量客户端访问一个存储节点，文件读取效率很低，造成网络负载不均，访问时延增大等问题。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：存储系统中被频繁访问的文件，现有系统中通过存放多份在不同的存储节点中，采用并发的方式减少某些存储节点的负荷。客户端读取文件，无论是什么文件，第一次都不会将整个文件全部读到内存中，需要向普通存储设备下发多次I/O请求次数；并且读出之后缓存在当前线程的内存之中，无法与其它线程共享。同一客户端不同的线程还可能重新发起I/O请求来读取相同文件，导致增加了网络交互和磁盘读取，且造成了文件访问速度慢，尤其热点小文件的读取效率低。

发明内容

本发明实施例提供一种文件数据访问方法、文件的元数据发送方法、装置以及系统，以提高网络存储中热点小文件读取效率。

一方面，本发明实施例提供了一种文件数据访问方法，向元数据服务器发送文件的元数据请求消息；接收元数据服务器返回的文件的元数据；根据文件的元数据与文件的大小预定值以及预定热点频率的比较结果，从客户端本地缓存或者从数据服务器的高速存储器中获取文件的所有数据；元数据服务器根据文件的元数据与所述文件的大小预定值以及预定热点频率的比较结果，向数据服务器发送用于将所述文件的所有数据发送给所述客户端进行缓存的第一消息或者用于将所述数据服务器的普通存储设备所存储的所述文件的所有数据缓存到所述数据服务器的高速存储设备的第二消息；数据服务器根据所述元数据服务器发送的第一消息或第二消息，对应的将所述文件的所有数据发送给所述客户端进行缓存或者将所述数据服务器的普通存储设备所存储的所述文件的所有数据缓存到所述数据服务器的高速存储设备中。

另一方面，本发明实施例提供了一种文件的元数据发送方法，所述方法包括：接收客户端发送的文件的元数据请求消息；根据文件的元数据与文件的大小预定值以及预定热点频率的比较结果，向数据服务器发送用于将文件的所有数据发送给客户端进行缓存的第一消息或者用于将数据服务器的普通存储设备所存储的文件的所有数据缓存到数据服务器的高速存储设备的第二消息；向客户端返回请求的文件的元数据；数据服务器根据元数据服务器发送的第一消息或第二消息，对应的将所述文件的所有数据发送给所述客户端进行缓存或者将所述数据服务器的普通存储设备所存储的所述文件的所有数据缓存到所述数据服务器的高速存储设备中；客户端接收所述文件的元数据，根据所述文件的元数据与文件的大小预定值以及预定热点频率的比较结果，对应的从客户端本地缓存或者从数据服务器的高速存储器中获取所述文件的所有数据。

又一方面，本发明实施例提供了一种客户端，所述客户端包括：元数据请求单元，用于向元数据服务器发送文件的元数据请求消息，并接收元数据服务器返回的文件的元数据；数据获取单元，用于根据文件的元数据与文件的大小预定值以及预定热点频率的比较结果，从客户端本地缓存或者从数据服务器的高速存储器中获取文件的所有数据；元数据服务器根据文件的元数据与所述文件的大小预定值以及预定热点频率的比较结果，向数据服务器发送用于将所述文件的所有数据发送给所述客户端进行缓存的第一消息或者用于将所述数据服务器的普通存储设备所存储的所述文件的所有数据缓存到所述数据服务器的高速存储设备的第二消息；数据服务器根据所述元数据服务器发送的第一消息或第二消息，对应的将所述文件的所有数据发送给所述客户端进行缓存或者将所述数据服务器的普通存储设备所存储的所述文件的所有数据缓存到所述数据服务器的高速存储设备中。