[发明专利]实现负载均衡的云存储系统

说明书

技术领域

本发明涉及计算机技术领域，更具体地，涉及实现负载均衡的云存储系统以及用于云存储系统的负载均衡方法。

背景技术

云存储系统面对的是海量用户操作海量数据的应用场景，在生产环境中，可能会出现各个层级上的性能瓶颈。这些性能瓶颈可包括例如站点级别的性能瓶颈、站点内部元数据访问瓶颈、站点内部负载数据访问瓶颈以及站点内部数据存储不均衡。例如，云存储站点通常部署在某个区域，通过互联网对外提供云存储服务。在云存储站点提供云存储服务过程中，可能出现该地区的访问量超过该站点服务能力的现象或者其他原因导致网络拥堵，因而影响业务响应。

然而，现有存在的云存储产品或解决方案中，只是对各个层级上的某一层级的不均衡情况或者部分不均衡情况进行了处理。由于性能瓶颈可能发生在各个层级上，对某一个层级的不均衡情况进行处理只能部分地改善云存储系统的性能，不能够从整体上改善云存储系统的性能。

发明内容

为解决现有技术存在的问题，本发明提供了一种实现负载均衡的云存储系统以及用于云存储系统的负载均衡方法，使得能够较好地改善云存储的系统的性能。

根据本发明的一个方面，提供了一种实现负载均衡的云存储系统，包括负载监控服务单元、多个云存储站点，所述多个云存储站点包括第一云存储站点和第二云存储站点，其中：

所述负载监控服务单元用于在检测出所述第一云存储站点的负载超过负载阈值时，将应用请求转发给所述第二云存储站点；

所述第二云存储站点包括多个服务接入点、多个元数据位置管理服务单元、至少一个元数据服务器和数据文件管理子系统，其中：

从多个服务接入点中选择的一个服务接入点用于将接收到的所述应用请求发送给所述多个元数据位置管理服务单元中负载较轻的元数据位置管理服务单元；

所述负载较轻的元数据位置管理服务单元用于根据所述应用请求确定出与应用相对应的元数据位置信息，以及根据所确定出的元数据位置信息从相应的元数据服务器获取相应的元数据；

所选择的服务接入点用于将所获取的元数据以及所述应用请求发送给所述数据文件管理子系统以便所述数据文件管理子系统根据所述应用请求执行相应的操作。

在可选实施例中，所述应用请求包括应用的读请求或者写请求，所述数据文件管理子系统，包括：

多个存储服务器，用于存储数据文件，其中数据文件以对象存储的方式管理并且一份数据文件具有至少一个对象；

负载均衡管理单元，用于监测所述多个存储服务器中每一个的负载情况，以及在监测到多个存储服务器中的第一存储服务器的写负载较重时，发送对象迁移指示，或者，在监测到所述第一存储服务器的读负载较重时，发送副本建立指示；以及，

数据迁移单元，用于根据所述对象迁移指示将第一存储服务器中的数据文件的部分对象迁移到负载较轻的存储服务器中；或者，根据所述副本建立指示为所述第一存储服务器中读访问频繁的数据文件在负载较轻的存储服务器中建立多个只读副本。

在可选实施例中，所述数据文件管理子系统还包括：存储均衡管理单元，用于监测所述多个存储服务器中每一个的空间使用率，当监测到第二存储服务器的空间使用率超过空间使用率阈值时，选择所述第二存储服务器服务负载较轻的时间段，指示所述数据迁移单元将所述二存储服务器的数据文件的部分对象迁移到空间使用率较小的存储服务器。

在可选实施例中，所述数据文件管理子系统的存储服务器包括：缓存单元、SSD/SAS磁盘和SATA磁盘，其中：高热点数据文件存储在所述缓存单元中；以及普通热点数据文件存储在所述SSD或SAS磁盘中；以及非热点数据文件存储在所述SATA磁盘中。

根据本发明的另一个方面，还提供了一种用于云存储系统的负载均衡方法，所述云存储系统包括负载监控服务单元和多个云存储站点，其中，所述多个云存储站点包括第一云存储站点和第二云存储站点，所述第二云存储站点包括多个服务接入点、多个元数据位置管理服务单元、至少一个元数据服务器和数据文件管理子系统，所述负载均衡方法包括：

所述负载监控服务单元在检测出所述第一云存储站点的负载超过负载阈值时，将应用请求转发给所述第二云存储站点；

所述第二云存储站点从多个服务接入点中选择一个服务接入点，并将接收到的所述应用请求发送给所选择的服务接入点；

所选择的服务接入点将应用请求发送给多个元数据位置管理服务单元中负载较轻的元数据位置管理服务单元；