[发明专利]基于数据湖服务器的算法配置组合平台

权利要求书

1.一种基于数据湖服务器的算法配置组合平台，其特征在于，包含：数据目录区，数据预处理工作台，数据预处理资源目录区，通用算法操作目录区，算法流程工作台，模型资源目录区，知识库；

在所述数据目录区中保存用户上传数据时建立的数据目录；

所述数据预处理工作台将读取若干个数据目录中存放的数据，且进行预处理工作之后形成数据预处理资源，并将已生成的数据预处理资源保存至所述数据预处理资源目录区；

所述通用算法操作目录区存放若干个算法操作，并将一个或多个算法操作传递给所述算法流程工作台；

所述算法流程工作台中选择算法操作的先后顺序，并输入算法需要的阈值；

所述数据预处理资源目录区中选择一个数据预处理资源作为第一个算法操作的训练集数据，并开始训练算法流程；

若所述算法流程是计算结果的算法流程，则其计算结果保存至所述知识库；

若所述算法流程是训练模型的算法流程，则训练模型保存至所述模型资源目录区；

所述模型资源目录区中选取已生成的训练模型，并且选取数据预处理资源目录区中未分类的数据进行计算，并将产生的计算结果保存至知识库中，将生成的模型以及与模型有关的数据，以文件形式存储在数据湖服务器中的分布式文件系统中，并在将来需要时作为数据可视化编辑展示平台的模型来源和数据来源。

2.如权利要求1所述的一种基于数据湖服务器的算法配置组合平台，其特征在于，计算结果的算法流程包含聚类、关联规则算法。

训练模型的算法流程包含分类、回归、人工神经网络算法和数据特征变换操作。

3.如权利要求2所述的一种基于数据湖服务器的算法配置组合平台，其特征在于，所述通用算法操作目录区上提供的数据特征变换操作进一步包含：降维、分箱、归一化。

4.如权利要求1所述的一种基于数据湖服务器的算法配置组合平台，其特征在于，所述数据预处理工作包括阈值进行数据筛选和分组求值；

所述算法流程工作台中若不输入阈值，则以缺省值来替代。

5.如权利要求1所述的一种基于数据湖服务器的算法配置组合平台，其特征在于，所述数据目录中存放的数据包含表、字段和数据标签。

6.如权利要求1所述的一种基于数据湖服务器的算法配置组合平台，其特征在于，数据拥有者在一个数据湖服务器节点通过用户名和密码登录图形化的操作界面，接入数据湖服务器管理平台，再点击按钮算法配置组合平台；

数据目录区，数据预处理工作台，数据预处理资源目录区，通用算法操作目录区，算法流程工作台，模型资源目录区，知识库，控制台均为图形化界面。

7.如权利要求1所述的一种基于数据湖服务器的算法配置组合平台，其特征在于，还包含控制台，执行训练算法流程的过程中出现的结果或异常结果及错误信息被打印至所述控制台并存为日志。

8.如权利要求1所述的一种基于数据湖服务器的算法配置组合平台，其特征在于，所述数据湖服务器包含关系型数据库、文档型数据库、分布式文件系统、图数据库构成的数据存储和管理服务平台，并提供包括数据管理、算法开发的多种功能组件；

所述管理服务平台采用分布式运算和存储架构，集成了具有数据存储以及运算功能的多种计算机单机、服务器以及计算机集群或者服务器集群。