[发明专利]数据处理方法、系统、电子设备和计算机可读存储介质

权利要求书

1.一种数据处理方法，包括：

获得基于非数据库语言编写的用于处理数据库中的数据的至少一个算法；以及

集成所述至少一个算法到分布式计算框架中，以供用户在使用所述分布式计算框架时能够基于所述算法处理数据库中的待处理数据，获得目标数据。

2.根据权利要求1所述的方法，还包括：

基于集成到所述分布式计算框架中的至少一个算法，获取配置界面，所述配置界面用于接收配置操作，生成配置数据，其中，所述配置数据用于使所述分布式计算框架确定需要调用的算法，以处理所述待处理数据，获得目标数据。

3.根据权利要求2所述的方法，还包括：

根据所述配置数据指示的所述待处理数据的数据结构，解析所述待处理数据，获得第一解析数据；

根据所述配置数据指示的求值方式，确定需要调用的算法；

基于所述算法，处理所述第一解析数据，获得处理数据；以及

基于所述处理数据，生成目标数据。

4.根据权利要求3所述的方法，还包括：

在根据所述配置数据，确定所述待处理数据包括多个相关联的表的情况下，根据所述配置数据指示的所述多个相关联的表的关联字段，基于所述第一解析结果，生成数据集合，

所述基于所述算法，处理所述第一解析数据，获得处理数据包括：基于所述算法处理所述数据集合，获得处理数据。

5.根据权利要求4所述的方法，还包括：

根据所述配置数据中指示的过滤规则，对所述数据集合进行过滤，

所述基于所述算法处理所述数据集合，获得处理数据包括：基于所述算法处理过滤后的数据集合，获得处理数据。

6.根据权利要求2所述的方法，在所述配置数据指示所述分布式计算框架执行第一类型的计算的情况下，所述基于所述处理数据，获得目标数据包括：

根据配置数据指示的目标数据的数据结构，将所述处理数据，转化为目标数据。

7.根据权利要求2所述的方法，在所述配置数据指示分布式计算框架执行第二类型的计算的情况下，所述基于所述处理数据，获得目标数据还包括：

解析所述处理数据，获得第二解析数据；以及

根据配置数据指示的任务类型，确定处理所述第二解析结果需要调用的计算方法，以基于所述计算方法，获得目标数据。

8.根据权利要求2所述的方法，还包括：存储所述配置数据。

9.一种数据处理系统，包括：

获得模块，用于获得基于非数据库语言编写的用于处理数据库中的数据的至少一个算法；以及

集成模块，用于集成所述至少一个算法到分布式计算框架中，以供用户在使用所述分布式计算框架时能够基于所述算法处理数据库中的待处理数据，获得目标数据。

10.根据权利要求9所述的系统，还包括：

获取模块，用于基于集成到所述分布式计算框架中的至少一个算法，获取配置界面，所述配置界面用于接收配置操作，生成配置数据，其中，所述配置数据用于使所述分布式计算框架确定需要调用的算法，以处理所述待处理数据，获得目标数据。

11.根据权利要求10所述的系统，还包括：

第一解析模块，用于根据所述配置数据指示的所述待处理数据的数据结构，解析所述待处理数据，获得第一解析数据；

第一确定模块，用于根据所述配置数据指示的求值方式，确定需要调用的算法；

处理模块，用于基于所述算法，处理所述第一解析数据，获得处理数据；以及

第一生成模块，用于基于所述处理数据，生成目标数据。