[发明专利]数据处理方法、装置、计算机系统和计算机可读存储介质

说明书

本公开提供了一种数据处理方法、装置、计算机系统和计算机可读存储介质。该方法包括：获取针对多个数据库中每个数据库的分配权重；根据每个数据库的分配权重确定分配至每个数据库的目标数据；以及将目标数据分配至与该目标数据对应的数据库中，以实现数据处理。

技术领域

本公开涉及计算机技术领域，更具体地，涉及一种数据处理方法、装置、计算机系统和计算机可读存储介质。

背景技术

随着通信及计算机技术的快速发展，相关的业务量也快速增长，单个数据库早已不能满足迅猛增长的业务数据量的存储需求。有鉴于此，目前最常用的解决办法就是把数据分散到N个数据库来存储，从而避免达到单个数据库承载数据的瓶颈。

在实现本公开构思的过程中，发明人发现相关技术中至少存在如下问题：现有技术中采用平均分配的策略将数据存储到多个数据库中，该策略并未考虑到每个数据库的实际配置和处理能力，导致数据分配并不合理。

发明内容

有鉴于此，本公开提供了一种数据处理方法、装置、计算机系统和计算机可读存储介质。

本公开的一个方面提供了一种数据处理方法，包括：获取针对多个数据库中每个所述数据库的分配权重；根据每个所述数据库的分配权重确定分配至每个所述数据库的目标数据；以及将所述目标数据分配至与所述目标数据对应的所述数据库中，以实现数据处理。

根据本公开的实施例，所述获取针对多个数据库中每个所述数据库的分配权重包括：针对每个所述数据库，获取所述数据库的软硬件配置信息，其中，不同的所述软硬件配置信息对应不同的权重系数；根据所述软硬件配置信息的权重系数确定所述数据库的权重值；以及根据所述权重值确定所述数据库的分配权重。

根据本公开的实施例，根据每个所述数据库的分配权重确定分配至每个所述数据库的目标数据包括：根据每个所述数据库的分配权重确定每个所述数据库的加权区间；计算待处理数据字段的哈希值；计算所述哈希值相对于所述多个数据库的分配权重之和的取模结果；以及根据所述取模结果和所述加权区间的关系确定分配至每个所述数据库的目标数据。

根据本公开的实施例，所述多个数据库至少包括第一数据库和第二数据库，其分配权重分别为第一权重和第二权重，根据每个所述数据库的分配权重确定每个所述数据库的加权区间包括：根据所述第一权重的值确定所述第一数据库的第一区间范围；将所述第一数据库的第一区间开始值确定为1；根据所述第一区间范围和所述第一区间开始值确定所述第一数据库的第一区间结束值；以及根据所述第一区间开始值和所述第一区间结束值确定所述第一数据库的加权区间。

根据本公开的实施例，根据每个所述数据库的分配权重确定每个所述数据库的加权区间还包括：根据所述第二权重的值确定所述第二数据库的第二区间范围；根据所述第一数据库的第一区间结束值确定所述第二数据库的第二区间开始值；根据所述第二区间范围和所述第二区间开始值确定所述第二数据库的第二区间结束值；以及根据所述第二区间开始值和所述第二区间结束值确定所述第二数据库的加权区间。

根据本公开的实施例，根据所述取模结果和所述加权区间的关系确定分配至每个所述数据库的目标数据包括：在所述取模结果属于所述第一数据库的加权区间的情况下，将所述待处理数据字段作为分配至所述第一数据库的目标数据；以及在所述取模结果属于所述第二数据库的加权区间的情况下，将所述待处理数据字段作为分配至所述第二数据库的目标数据。

根据本公开的实施例，根据每个所述数据库的分配权重确定分配至每个所述数据库的目标数据还包括：根据每个所述数据库的分配权重相对于所述多个数据库的分配权重之和的百分比，确定分配至每个所述数据库的数据量；以及根据所述分配至每个所述数据库的数据量确定分配至每个所述数据库的目标数据。

根据本公开的实施例，所述数据处理方法还包括：在至少一个所述数据库的软硬件配置信息发生变化的情况下，更新软硬件配置信息发生变化的所述数据库的分配权重。