[发明专利]分布式缓存阵列及其数据更新方法

说明书

技术领域

本发明涉及数据处理技术，特别涉及一种分布式缓存阵列及其数据更新方法。

背景技术

随着科技的进步，用于描述信息的数据量也在不断增加，而且数据涉及的范围越来越广泛，数据之间的关系也变得更为复杂。为了提高数据处理的工作效率，对数据处理技术也提出了更高的要求。

目前主要使用的数据处理技术，首先是将数据存入缓存阵列，然后对缓存阵列中的数据进行操作。缓存阵列也可以说是数据的集合。随着数据量的增加，单一服务器已经无法满足高并发缓存阵列的数据处理业务请求，因而出现了以异地存储为基础的分布式缓存阵列。现有的分布式缓存阵列的架构如图1所示，包括通过支持广播的高速互连网络连接而形成集群的存储实例。当外部访问缓存阵列，进行相关数据操作时，例如从缓存阵列查询数据，或者对缓存阵列内的数据进行更新，都以分布式处理的方式分别在多个实例中进行。

现有的分布式缓存阵列在进行数据处理时存在如下问题，应用服务器的负载能力有限，在面对大数据量密集型的数据更新请求时，响应缓慢并且容易出现多重对数据的锁操作，这些锁会造成后续的请求堆积，而服务器本身的处理能力此时又得不到充分利用。

发明内容

本发明解决的问题是提供一种分布式缓存阵列及其数据更新方法，提高数据更新效率，缩短数据更新的时间，降低服务器负载。

本发明提供的分布式缓存阵列，包括通过支持广播方式的高速互连网络相互连接的若干存储实例；所述存储实例包括一台目录服务器、一个主存储单元以及与其关联的若干备份存储单元；所述目录服务器通过高速互连网侦听各存储实例的负载情况，并响应外部应用反馈低负载的存储实例列表以及向其他存储实例发送存储数据以及数据更新请求；所述存储实例还包括更新引擎，用于接收所述数据更新请求，并对本存储实例的主存储单元更新存储数据。

可选的，所述存储实例的目录服务器在主存储单元产生故障时，从备份存储单元选取新的主存储单元。

本发明还提供了采用上述分布式缓存阵列的数据更新方法，包括：所述缓存阵列从外部接收数据更新请求，选取负载轻的存储实例作为代理实例，执行代理更新操作；所述代理更新操作包括：代理实例向其他存储实例发送待存储数据进行存储。

可选的，所述缓存阵列从外部接收数据更新请求后，通过缓存阵列内的应用服务器向各目录服务器转发，所述外部应用服务从最先响应的目录服务器获取一组存储实例列表；所述列表是该目录服务器根据当前侦听统计结果，依据负载情况生成的负载相对较轻的存储实例列表；所述外部应用服务从列表中随机选择一个存储实例作为代理实例。

可选的，所述代理实例向其他存储实例发送存储数据包括：代理实例的目录服务器将数据更新请求内所需存储的数据的查询定位信息向集群内的各存储实例广播；再与响应该数据查询定位信息的存储实例进一步通讯，拆分待存储数据并将其与数据更新请求发送给上述响应的存储实例。

可选的，所述存储实例存储数据包括：各存储实例的更新引擎接收到来自代理实例的数据更新请求以及经过拆分的存储数据后，更新本存储实例内的主存储单元。

可选的，所述代理实例的目录服务器监控数据更新过程，当所有待存储数据均存储进各存储实例的主存储单元中时，通知各存储实例进行备份操作，所述备份操作包括：各存储实例的主存储单元将当前存储数据通过提交事务日志的方式同步至与其关联的备份存储单元中。

可选的，所述存储实例的主存储单元在发生故障无法进行数据更新时，目录服务器向与其关联的各备份存储单元广播产生新主存储单元的通告信息，并选取响应最快的备份存储单元作为新的主存储单元。

与现有技术相比，本发明具有以下优点：当向缓存阵列中存储数据时，采取分布式写入随机选择存储实例的模式，使所存储的数据是相对均衡地分布在集群内多个存储实例之中。也使更新数据的操作能较为均衡地分布在集群内多个存储实例之上。平衡负载从而提高更新效率以及速度。

附图说明

图1是现有的分布式缓存阵列的架构示意图；

图2是本发明所述分布式缓存阵列的硬件实现示意图；

图3是本发明所述分布式缓存阵列的架构示意图；

图4是本发明实施例的数据更新方法的步骤流程图。

具体实施方式

为使本发明的上述目的、特征和优点能够更为明显易懂，下面结合本发明的分布式缓存阵列及数据查询方法的具体实施方式做详细的说明。