[发明专利]海量数据分库存储的方法、装置、计算机设备及存储介质

说明书

本申请公开了海量数据分库存储的方法、装置、计算机设备及存储介质，其中，方法包括：提取同类型海量数据的关键字段的值；根据所述关键字段的值对同类型海量数据进行分段；为各段的海量数据分配相应的数据库，并将各段的海量数据存储至相应的数据库中。采用本申请的方法进行分库存储处理之后，各个数据库的存储量较为平均，并且查询性能得到提升，也克服了更新或删除时锁表的问题。

技术领域

本申请涉及数据存储技术领域，尤其涉及海量数据分库存储的方法、装置、计算机设备及存储介质。

背景技术

现有技术中，对于海量的数据来说，比如几亿或几十亿条数据，当将这些数据存储在同一个数据库的同一个表中的时候，对于数据的查询、更新、删除操作都存在性能上的瓶颈，并且容易出现锁表的情况。因此需要对数据进行分库处理，但现有技术中提供的分库存储方法，其仍存在查询效率低、更新或删除操作时容易出现锁表的问题。

申请内容

本申请实施例提供了海量数据分库存储的方法、装置、计算机设备及存储介质，旨在解决现有技术中分库存储方法存在查询效率低、更新或删除操作易出现锁表的问题。

第一方面，本申请实施例提供了一种海量数据分库存储的方法，其包括：

提取同类型海量数据的关键字段的值；

根据所述关键字段的值对同类型海量数据进行分段；

为各段的海量数据分配相应的数据库，并将各段的海量数据存储至相应的数据库中。

第二方面，本申请实施例提供了一种海量数据分库存储的装置，其包括：

提取模块，用于提取同类型海量数据的关键字段的值；

分段模块，用于根据所述关键字段的值对同类型海量数据进行分段；

存储模块，用于为各段的海量数据分配相应的数据库，并将各段的海量数据存储至相应的数据库中。

第三方面，本申请实施例提供了一种计算机设备，其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面所述的海量数据分库存储的方法。

第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述海量数据分库存储的方法。

本申请实施例提供了一种海量数据分库存储的方法，包括：提取同类型海量数据的关键字段的值；根据所述关键字段的值对同类型海量数据进行分段；为各段的海量数据分配相应的数据库，并将各段的海量数据存储至相应的数据库中。经过本申请实施例提供的方法进行分库存储处理之后，各个数据库的存储量较为平均，并且查询性能得到提升，也克服了更新或删除时锁表的问题。本申请实施例同时还提供了一种海量数据分库存储的装置、一种计算机可读存储介质和一种计算机设备，具有上述有益效果，在此不再赘述。

附图说明

为了更清楚地说明本申请实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的海量数据分库存储的方法的流程示意图；

图2为本申请实施例提供的海量数据分库存储的装置的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。