[发明专利]一种处理数据的方法和装置

说明书

本发明公开了一种处理数据的方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：能够根据数据仓库中的多个目标数据表之间存在的关联关系，构建中间数据表；在接收到针对多个目标数据表的处理请求时，从中间数据表中查找与处理请求相关的数据；通过构建中间数据表，较大程度缩短了数据表之间的关联路径，降低了数据处理的资源消耗，并提高了数据处理开发的效率。

技术领域

本发明涉及计算机技术领域，尤其涉及一种处理数据的方法和装置。

背景技术

当执行处理数据时，往往需要从数据仓库包含的成千上万数量的数据表中获取并处理数据，在处理数据的过程中，待处理的数据通常需要从多个具有关联关系的数据表中获取。

但是，当数据仓库中的数据表关联路径较长时，开发人员需要了解关联路径中每个数据表的每个字段的对应关系，造成开发复杂度的增加，尤其是当数据表的数量级较大时，降低了开发效率，提高了数据处理的资源消耗。

发明内容

有鉴于此，本发明实施例提供一种处理数据的方法和装置，能够根据数据仓库中的多个目标数据表之间存在的关联关系，构建中间数据表；在接收到针对多个目标数据表的处理请求时，从中间数据表中查找与处理请求相关的数据；通过构建中间数据表，较大程度缩短了数据表之间的关联路径，降低了数据处理的资源消耗，并提高了数据处理开发的效率。

为实现上述目的，根据本发明实施例的一个方面，提供了一种处理数据的方法，其特征在于，包括：获取数据仓库中多个目标数据表以及多个所述目标数据表之间存在的直接关联关系或者间接关联关系；根据多个所述目标数据表之间存在的所述直接关联关系或者所述间接关联关系以及所述目标数据表包括的字段，为多个所述目标数据表构建中间数据表；在接收到针对多个所述目标数据表的处理请求时，从所述中间数据表中查找与所述处理请求相关的数据；如果查找结果指示所述数据全部存储于所述中间数据表，基于所述中间数据表处理所述数据；如果查找结果指示所述数据部分存储于所述中间数据表，基于所述中间数据表，从多个所述数据表中查找与所述处理请求相关的数据，并处理所述数据。

可选地，所述处理数据的方法，其特征在于，获取数据仓库中多个目标数据表以及多个所述目标数据表之间存在的直接关联关系或者间接关联关系，包括：获取所述数据仓库中的多个数据表；在多个所述数据表中，查找具有相同字段的至少两个目标数据表，并确定至少两个所述目标数据表之间存在直接关联关系；根据多个所述直接关联关系以及每一个所述直接关联关系所对应的至少两个所述目标数据表，确定多个所述目标数据表之间的间接关联关系。

可选地，所述处理数据的方法，其特征在于，确定多个所述目标数据表之间的间接关联关系，包括：为每一个所述直接关联关系所对应的至少两个所述目标数据表，构建关系字典；根据所述关系字典，为每一个所述目标数据表查找存在间接关联关系的其他目标数据表。

可选地，所述处理数据的方法，其特征在于，确定多个所述目标数据表之间的间接关联关系，包括：将每一个所述目标数据表抽象为结点；根据所述直接关联关系，为多个所述结点构建对应的连接边，得到关系图；根据所述关系图，为每一个所述目标数据表查找存在间接关联关系的其他目标数据表。

可选地，所述处理数据的方法，其特征在于，进一步包括：针对每一个所述目标数据表，为所述目标数据表所属的直接关联关系计算第一关联数量，并为所述目标数据表所属的间接关联关系的每一层关系计算第二关联数量；结合所述第一关联数量、所述第二关联数量，执行为多个所述目标数据表构建中间数据表的步骤。

可选地，所述处理数据的方法，其特征在于，所述为多个所述目标数据表构建中间数据表，包括：根据多个所述目标数据表之间存在的所述直接关联关系或者所述间接关联关系，将多个所述目标数据表聚类为多种类别；根据多种所述类别所包括的所述目标数据表的第一关联数量和第二关联数量，构建中间层数据表和至少一个外层数据表；组合所述中间层数据表和至少一个所述外层数据表，得到所述中间数据表。