[发明专利]一种表数据删除方法、装置、计算机设备及存储介质

说明书

本申请实施例属于大数据领域，涉及一种表数据删除方法，包括根据查找代码在数据库中多线程查找出待删除表数据中每行数据的唯一标识符；根据预设规则对多个所述唯一标识符进行排序，形成多个数据集；将排序后的多个所述数据集存入预设的数组变量中；及根据所述数组变量分批次、多线程对待删除数据执行删除操作。本申请还提供一种表数据删除装置、计算机设备及存储介质。本申请由于表数据中的数据是分块储存的，通过表数据中每个记录的唯一标识符对数据进行识别，可以实现分块删除表数据，减少了逻辑读的操作，同时通过分批次、多线程操作，提高了删除的效率，减少运行的时间。

技术领域

本申请涉及大数据技术领域，尤其涉及一种表数据删除方法、装置、计算机设备及存储介质。

背景技术

在关系数据管理系统(oracle)中，根据实际业务的需求，经常需要对一个oracle中的表数据按照指定条件进行删除，遇到一些大的表数据，每次删除的数据量达到五千万左右，现有的逻辑是对参与过滤条件的字段建立索引，对过滤后的数据进行分批次提交删除，以防止直接删除导致表被锁死的情况发生。

采用上述逻辑虽然解决了表被锁死的问题，但是执行效率不高，整个删除过程耗时长，例如删除五千万左右的数据量需要10个小时，同时在删除过程中，越到后期，删除效率越慢，而且会导致查表动作越来越慢，以致于删除一次就需要dba协助对表进行降水位的操作，对后期程序的开发和运营维护极为不利。

发明内容

本申请实施例的目的在于提出一种表数据删除方法、装置、计算机设备及存储介质，以解决现有技术中删除效率低、运行时间长的技术问题。

为了解决上述技术问题，本申请实施例提供一种表数据删除方法，采用了如下所述的技术方案：

一种表数据删除方法，包括下述步骤：

根据查找代码在数据库中多线程查找出待删除表数据中每行数据的唯一标识符；

根据预设规则对多个所述唯一标识符进行排序，形成多个数据集；

将排序后的多个所述数据集存入预设的数组变量中；及

根据所述数组变量分批次、多线程对待删除数据执行删除操作。

进一步的，所述根据查找代码在数据库中多线程查找出待删除表数据中每行数据的唯一标识符的步骤具体包括：

预定义一脚本文件，所述脚本文件用于动态创建和执行查找代码；

根据所述待删除表数据在所述匿名块内动态创建查找代码，并动态按照所述查找代码多线程查找出待删除表数据中每行数据的唯一标识符；

按照线程数对所查找的唯一标识符进行分别存储。

进一步的，所述按照线程数对所查找的唯一标识符进行分别存储的步骤具体为：按照线程数划分存储单元，在单位时间内对每个线程所查找的唯一标识符存储至对应的存储单元内。

进一步的，所述根据预设规则对多个所述唯一标识符进行排序，形成多个数据集的步骤具体包括：

识别所述多线程查找中的线程数；

对每个线程中查找出的多个唯一标识符按照预设规则进行排序，形成多个数据集；并

剔除数据对象编号不一致的唯一标识符，得到多个修正后的数据集。

进一步的，所述将排序后的多个所述数据集存入预设的数组变量中的步骤具体包括：

预定义一数组变量，所述数组变量包括数据类型、数组名和数型常量表达式，所述数据类型为表数据，所述数组名为数据集的名称，所述数型常量表达式表示该数组的大小；

将排序后的多个数据集赋予预定义的所述数组变量中。