[发明专利]基于网络存储设备的混合云存储系统及其数据处理方法

说明书

本发明公开一种基于网络存储设备的混合云存储系统及其数据处理方法，所述系统包括云存储端、网络存储设备端和客户端；所述云存储端备份所述网络存储设备端的文件，所述客户端优先从所述网络存储设备端下载文件；所述客户端，用于收集数据访问行为信息，并将所述数据访问行为信息上报至所述云存储端；所述数据访问行为信息包括所述客户端分别对所述云存储端和所述网络存储设备端中存储的文件的访问参数；所述云存储端，用于根据各个文件的访问参数，计算各个文件的热点权重，并将热点权重高于预设阈值的文件作为热数据，缓存于所述网络存储设备中。本申请提供的基于网络存储设备的混合云存储系统能够解决现有的混合云架构中的各种问题。

技术领域

本申请涉及数据处理领域，具体涉及一种基于网络存储设备的混合云存储系统及其数据处理方法。

背景技术

网络的普及和数字时代的来临，使得信息呈现出爆炸式增长的趋势，全球数据量的级别已经达到ZB级别，这使得云存储技术诞生。

云存储(Cloud Storage)是在云计算(cloud computing)概念上延伸和发展出来的新概念和新兴的网络存储技术，是指通过集群、网络、分布式文件系统等技术，将网络中不同类型的存储设备通过应用软件集合起来协同工作，对外提供数据存储和业务访问功能的系统。云存储使用者可以在任何时间、任何地方，通过任何可连网并安装云存储应用的装置，方便地访问云存储空间和存取数据。云存储根据云的建设地点和服务对象不同，可以分为公有云存储、私有云存储和混合云存储。

公有云通常指第三方供应商提供用户使用的云，可通过网络使用，使客户能够访问和共享基本的计算机基础设施，其中包括计算、存储和带宽等资源。公有云的存储系统一般可以选择块存储、对象存储和文件系统存储三种类型。客户只需为他们使用的公有云资源支付费用。此外，客户无需担心自己安装和维护的问题。但公有云存在以下缺点：第一、客户出于数据安全性的考虑，一般不愿将重要数据存放在公共云端；第二、在线流量峰值期间可能会发生网络问题和文件访问慢等问题；第三、虽然公共云模型通过提供按需付费的定价方式通常具有成本效益，但在大量数据传输时，其带宽费用会迅速增加；第四、公有云的存储系统如采用文件存储类型，有大量数据需要存储时成本较高，采用对象存储类型成本较低，但文件操作受限。

私有云是为某个客户单独使用而构建的，能够提供对数据、安全性和服务质量有效控制。客户拥有私有云的基础设施，可以控制在此基础设施上部署应用程序的方式。私有云可部署在企业数据中心的防火墙内，也可以将它们部署在一个安全的主机托管场所。相比公有云，私有云可以避免客户的数据安全性顾虑、通常具有文件传输速度优势、大量数据传输时具有成本优势。但私有云存在以下缺点：第一、安装成本很高；第二、配置资源弹性较差；第三、客户从远程位置访问体验较差，如离线和访问速度慢等问题。

混合云是公有云和私有云两种服务方式的结合。综合公有云和私有云各自的优势，混合云可以将公有云作为灾难转移、私有云数据备份、云端数据处理、远程数据访问的平台，将私有云作为热数据存储、安全和控制数据存储的平台。此外，客户可以灵活配置混合云资源，使混合云具有成本效益。但目前的混合云存在以下缺点：第一、主要面向的客户是企业，私有云由服务器构建，构建复杂、成本高、不支持多种客户端，无法满足个人用户的需求；第二、冷热数据判断维度单一，一般只能根据访问频次判断热点权重；第三、公有云和私有云文件传输时未考虑通道选择等，不能提升用户的文件传输速率体验。

综述，目前亟需一种能够解决上述问题的存储系统。

发明内容

有鉴于此，本发明提供了一种基于网络存储设备的混合云存储系统及其数据处理方法。

第一方面，本发明提供一种基于网络存储设备的混合云存储系统，所述系统包括云存储端、网络存储设备端和客户端；所述云存储端备份所述网络存储设备端的文件，所述客户端优先从所述网络存储设备端下载文件；