[发明专利]数据处理方法、装置及可读存储介质

说明书

本公开涉及一种数据处理方法、装置及可读存储介质，其中，该方法通过预先对相邻的数据子集进行匹配，并存储获得的对应关系。在获取到查询任务时，可根据查询条件，在上述预先保存的对应关系中直接进行查询，无需如现有技术中按照查询条件在原始数据集中进行逐条匹配。另外，本公开实施例提供的方案，多个目标数据子集组分别对应的查询任务可以并行执行，能够进一步提高处理效率。且本实施例提供的方案，在进行正向查询以及反向回溯的过程，是根据数据元素的标识进行查询匹配，从而可以忽略数据元素的数据类型、数据结构等，更加灵活，也更加有利于后期维护和存储。

技术领域

本公开涉及数据处理技术领域，尤其涉及一种数据处理方法、装置及可读存储介质。

背景技术

在信息时代的背景下，数据是领域发展的核心，其中，数据关联是查询有效数据的重要手段之一。现有技术中，通常是采用动态查询的方式进行数据关联。具体地，根据查询条件，在多个数据集中逐条匹配，之后将匹配成功的数据元素关联起来。

随着数据集以及数据集包括的数据元素的不断增大，采用上述方式，查询效率较低。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种数据处理方法、装置及可读存储介质。

第一方面，本公开实施例提供了一种数据处理方法，包括：

获取查询请求，所述查询请求包括至少一个查询条件；

针对至少一个目标数据子集组中的每个目标数据子集组，根据所述至少一个查询条件以及预先获取的第n个数据子集与第n+1个数据子集之间的对应关系，获取所述目标数据子集组对应的查询结果；其中，n的取值为1至N-1，N为大于或等于2的整数；所述目标数据子集组对应的查询结果包括用于指示所述目标数据子集组中满足所述至少一个查询条件的数据元素的信息；

根据每个所述目标数据子集组对应的查询结果，获取所述至少一个目标数据子集组中满足所述查询条件的数据元素。

在一些可能的设计中，所述针对至少一个目标数据子集组中的每个目标数据子集组，根据所述至少一个查询条件以及预先获取的第n个数据子集与第n+1个数据子集之间的对应关系，获取所述目标数据子集组对应的查询结果，包括：

针对所述目标数据子集组，根据所述至少一个查询条件中第1个数据子集对应的查询条件，对所述第1个数据子集中的所有数据元素进行筛选，获取所述第1个数据子集对应的第一查询结果；

根据所述第n个数据子集对应的第一查询结果、以及所述第n个数据子集与第n+1个数据子集之间的对应关系，确定第n+1个数据子集对应的候选数据元素；

根据所述至少一个查询条件中第n+1个数据子集对应的查询条件，对所述第n+1个数据子集对应的候选数据元素进行筛选，获取所述第n+1个数据子集对应的第一查询结果；并更新n＝n+1，直至所述n+1等于所述N，获得所述目标数据子集组中每个数据子集对应的第一查询结果；其中，n的取值为1至N-1；

根据所述目标数据子集组中的每个数据子集对应的第一查询结果，获取所述目标数据子集对应的查询结果。

在一些可能的设计中，所述第n个数据子集和所述第n+1个数据子集之间的对应关系为所述第n个数据子集中的数据元素对应的第一标识和所述第n+1个数据子集中与其相匹配的的数据元素对应的第一标识之间的对应关系；

根据所述第n个数据子集对应的查询结果、以及所述第n个数据子集与第n+1个数据子集之间的对应关系，确定第n+1个数据子集对应的候选数据元素，包括：

根据所述第n个数据子集对应的查询结果中指示的数据元素的第一标识，在所述第n个数据子集和所述第n+1个数据子集之间的对应关系中进行匹配，确定所述第n+1个数据子集对应的候选数据元素的第一标识。