[发明专利]一种BW系统处理链智能优化的方法

摘要

本发明公开了一种BW系统处理链智能优化的方法，在当前BW系统处理链布置的基础上，结合智能分析得到的系统资源占用率、处理链节点前后依赖关系，对处理链节点组合优化，参照处理链以往运行的数据，对相关属性进行数据化，利用Matlab工具集成的有向图路径搜寻，实现处理节点的组合顺序最优组合，实现BW系统处理链智能优化。本发明能够在客观的运行数据的基础上，综合考虑并发程度、系统资源、数据流顺序等影响因素，计算出处理链的最优化设计方案，使处理链的运行时间最短化。本发明同样适用于其它数据仓库系统的批量数据抽取作业。

主权项

一种BW系统处理链智能优化的方法，其特征在于：该方法在当前BW系统处理链布置的基础上，结合智能分析得到的系统资源占用率、处理链节点前后依赖关系，对处理链节点组合优化，参照处理链以往运行的数据，对相关属性进行数据化，利用Matlab工具集成的有向图路径搜寻，实现处理节点的组合顺序最优组合，实现BW系统处理链智能优化；具体步骤如下：1）对BW系统中处理链节点进行属性特征提取并量化；2）对提取的数据进行清洗与转化；将BW处理链节点的相应特征转化为每个处理链节点的属性值，从而将每个节点表示为一个向量；3）根据BW处理链节点的属性值，对所有BW处理链节点进行类别区分筛选工作，获得不同的处理链节点类别，包括单点型、直线型、网络型，不同的类别在后续工作中采取不同的优化方式；4）对同属于一个网络结构的网络型处理链节点，利用程序接口将其数据发送到Matlab工具，并调用集成图的最短路径算法求解，得到每个网络结构的最优设计方案；后续工作中，此网络结构将视为一个单独的、固定的结点；5）将单点型、直线型，以及上一步计算出的网络型处理链节点属性数据通过程序接口发送到Matlab工具，并调用集成的分支界定算法求解，得到所有处理链节点的最优设计方案；6）将计算结果通过程序接口返回BW系统，后续以可视化界面展现。