[发明专利]一种基于分布式存储的数据读取方法

说明书

本发明涉及一种基于分布式存储的数据读取方法，方法包括以下步骤：接收带有读请求消息的多个读操作；执行多个读操作之间的合并流程，即对读操作的读请求消息执行合并流程，使得执行合并流程后的读请求消息的大小是基本存储单元的整数倍；执行合并流程后的读操作进入读流程，进行数据读取操作。本发明的基于分布式存储的数据读取方法将接收的带有读请求消息的读操作执行合并流程，即，执行读请求消息的合并操作，使得大部分执行合并流程后的读请求消息的大小是基本存储单元的整数倍，这样便处于条带对齐的状态，在条带对齐的状态下，有效的提高了数据读取效率和读性能。

技术领域

本发明涉及分布式存储技术领域，尤其是指一种基于分布式存储的数据读取方法。

背景技术

随着信息技术的不断发展，数据作为一种宝贵资源逐渐被人们重视，如何快速处理数据资源并得到预期结果成为由资源到资产转变的关键问题之一。人们在工作生活中的各种活动都会产生数据，收集这些数据再通过分析处理能够获得很有有用信息，实现有资源到资产的转化，从而催化了大数据、高性能计算的高速发展。数据存储作为数据资源的核心要素之一也迎来了高速发展的时期。传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性能的瓶颈，也是可靠性和安全性的焦点，不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构，不但提高了系统的可靠性、可用性和存取效率，还易于扩展，从而被越来越多的企业单位接受认可。

iSCSI(Internet Small Computer System Interface，Internet小型计算机系统接口)对接分布式存储的场景中，在计算节点上挂载存储的卷，通过虚拟机读写这些卷；由于在大规模部署使用环境下，计算节点和虚拟机节点根据实际使用情况进行弹性管理，此时批量、自动化操作尤为重要。在默认情况下，虚拟机向数据盘发起的1M读请求会被拆分成[504k,504,16k]和[512k,512k]两种IO模型下发到分布式存储，分布式存储处理这两种非条带对齐的IO模型效率很低，影响读性能。

发明内容

为了解决上述技术问题，本发明提供了一种基于分布式存储的数据读取方法，可以提升分布式存储中的数据读取效率。

为实现上述目的，本申请提出第一技术方案：

一种基于分布式存储的数据读取方法，包括以下步骤：

接收带有读请求消息的多个读操作；

执行多个读操作之间的合并流程，即对读操作的读请求消息执行合并流程，使得执行合并流程后的读请求消息的大小是基本存储单元的整数倍；

执行合并流程后的读操作进入读流程，进行数据读取操作。

在本发明的一个实施例中，所述执行多个读操作之间的合并流程前，还包括：

将接收的读操作加入到第一队列，并定期将第一队列里的读操作转移到第二队列。

在本发明的一个实施例中，所述执行多个读操作之间的合并流程，具体包括：

以第一队列中的读操作为源读操作，第二队列中的读操作为目的读操作，执行合并流程，其中，第一队列会不断加入新的读操作；

第二队列中以未执行过合并流程的读操作作为源读操作，执行过合并流程的读操作作为目的读操作，执行合并流程；

第二队列中剩余的读操作之间执行合并流程。

在本发明的一个实施例中，所述合并流程，具体包括：

判断源读操作与目的读操作是否满足合并条件；

如果满足合并条件，则将源读操作的读请求消息插入到目的读操作的读请求消息；

如果不满足合并条件，则将不满足合并条件的源读操作送入至第二队列。