[发明专利]一种分布式数据驱动过程建模优化方法及系统在审
申请号: | 202210482698.X | 申请日: | 2022-05-05 |
公开(公告)号: | CN114662796A | 公开(公告)日: | 2022-06-24 |
发明(设计)人: | 杜文莉;钱锋;杨明磊;钟伟民;王新杰;徐金金 | 申请(专利权)人: | 华东理工大学 |
主分类号: | G06Q10/04 | 分类号: | G06Q10/04;G06Q10/06;G06N20/00;G06N3/08;G06N3/04;G06N3/00;G06K9/62 |
代理公司: | 上海专利商标事务所有限公司 31100 | 代理人: | 陶玉龙;陆嘉 |
地址: | 200237 *** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 数据 驱动 过程 建模 优化 方法 系统 | ||
本发明涉及工业流程优化领域,更具体的说,涉及一种分布式数据驱动过程建模优化方法及系统。本方法包括:步骤S1、根据任务要求和数据集尺寸,确定所用的机器学习模型,将模型配置文件下发至对应各节点;步骤S2、节点进行数据驱动建模获得节点模型,并上传至参数服务器;步骤S3、参数服务器对节点模型进行聚合获得全局模型,将全局模型下发至对应各节点;步骤S4、选择决策优化的载体,确定优化目标数和优化策略;步骤S5、在载体上使用全局模型和节点模型,结合优化策略进行进化优化,搜索获得可行解;步骤S6、节点对可行解进行评估,直至满足终止条件。本发明基于联邦学习建模实现数据分布式存储时的隐私保护建模和决策优化,适应性较为广泛。
技术领域
本发明涉及工业流程优化领域,更具体的说,涉及一种分布式数据驱动过程建模优化方法及系统。
背景技术
随着移动边缘设备的迅速普及以及工业互联网和5G的快速发展,加速了流程工业大数据的爆发。流程工业大数据,包含过程状态数据、设备运维数据和安监环保图像信息等异构数据等。
数据驱动的过程建模及决策优化方法,因适合用于提取大数据中蕴含的知识,而在流程工业智能化尤其是流程工业建模和决策优化中获得了广泛的应用。
图1是典型的集中式数据驱动建模及决策优化流程示意图,如图1所示,典型的集中式数据驱动建模及决策优化流程,首先,由人工将碎片化的数据收集到数据中心并进行预处理,然后,使用处理后的数据进行过程建模,过程建模包括数据处理、模型选择、模型拟合和模型部署,最后,使用获得的模型进行过程决策,过程决策包括决策优化、激活部署模型、选择优化策略和决策优化。
目前,在集中式数据驱动建模及决策优化算法领域开展了大量工作,并在一些现实世界任务上取得了巨大成功,现实世界任务如危险气体溯源问题、飞行器造型优化问题等。然而,该算法需要从不同设备收集分散存储的节点数据,可能会影响数据安全、泄露用户隐私。
发明内容
本发明的目的是提供一种分布式数据驱动过程建模优化方法及系统,解决现有的集中式数据驱动建模决策过程需要从不同设备收集节点数据造成的数据安全性的问题。
为了实现上述目的,本发明提供了一种分布式数据驱动过程建模优化方法,包括以下步骤:
步骤S1、根据任务要求和数据集尺寸,确定所用的机器学习模型,将模型配置文件下发至对应各节点,所述节点为分布式全流程设备或跨区域分工厂;
步骤S2、节点对本地离线数据集和在线数据集进行预处理,使用本地离线数据和在线数据作为训练集,进行数据驱动建模获得节点模型,将节点模型上传至参数服务器;
步骤S3、参数服务器对节点模型进行聚合获得全局模型,将全局模型下发至对应各节点;
步骤S4、选择参数服务器或节点作为决策优化的载体,确定优化目标数和优化策略;
步骤S5、在载体上使用全局模型和节点模型,结合优化策略进行进化优化,搜索获得可行解;
步骤S6、节点对可行解进行评估,更新在线数据集,以收到的全局模型为基础进行增量更新,重复步骤S2-S5直至满足终止条件。
在一实施例中,所述机器学习模型为浅层机器学习网络或深度神经网络:
所述浅层机器学习网络包含BP神经网络和径向基神经网络;
所述深度神经网络包含卷积神经网络和循环神经网络。
在一实施例中,所述步骤S2中进行数据驱动建模,进一步包括:
采用梯度下降算法进行模型训练。
在一实施例中,所述步骤S2中,节点k的建模目标函数Fk对应表达式为:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华东理工大学,未经华东理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210482698.X/2.html,转载请声明来源钻瓜专利网。
- 同类专利
- 专利分类
G06Q 专门适用于行政、商业、金融、管理、监督或预测目的的数据处理系统或方法;其他类目不包含的专门适用于行政、商业、金融、管理、监督或预测目的的处理系统或方法
G06Q10-00 行政;管理
G06Q10-02 .预定,例如用于门票、服务或事件的
G06Q10-04 .预测或优化,例如线性规划、“旅行商问题”或“下料问题”
G06Q10-06 .资源、工作流、人员或项目管理,例如组织、规划、调度或分配时间、人员或机器资源;企业规划;组织模型
G06Q10-08 .物流,例如仓储、装货、配送或运输;存货或库存管理,例如订货、采购或平衡订单
G06Q10-10 .办公自动化,例如电子邮件或群件的计算机辅助管理
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置