[发明专利]面向遥感大数据处理的动态自适应分布式协同工作流系统有效
| 申请号: | 202110467800.4 | 申请日: | 2021-04-28 | 
| 公开(公告)号: | CN113010598B | 公开(公告)日: | 2022-11-01 | 
| 发明(设计)人: | 杜莹;张硕;程普;蔡坤;何思源;曹珂静;张旭升 | 申请(专利权)人: | 河南大学 | 
| 主分类号: | G06F16/26 | 分类号: | G06F16/26;G06F16/29;G06F3/04845;G06F3/0483;G06F21/60;G06F40/186 | 
| 代理公司: | 郑州大通专利商标代理有限公司 41111 | 代理人: | 张立强 | 
| 地址: | 475004 河*** | 国省代码: | 河南;41 | 
| 权利要求书: | 查看更多 | 说明书: | 查看更多 | 
| 摘要: | |||
| 搜索关键词: | 面向 遥感 数据处理 动态 自适应 分布式 协同 工作流 系统 | ||
1.面向遥感大数据处理的动态自适应分布式协同工作流系统,其特征在于,包括:工作流模型协同构建模块、工作流引擎模块、遥感大数据处理资源管理子系统和遥感大数据处理计算平台;
所述工作流模型协同构建模块,用于采用协同编辑界面,由多个专家共同采用拖拽的形式进行图形化构建,自动生成遥感大数据处理过程描述语言RSBDPDL描述的遥感大数据处理工作流模型;所述工作流模型协同构建模块包括:用户管理及访问控制模块、协同编辑界面、冲突处理组件和RSBDPDL文档库;
所述用户管理及访问控制模块,用于控制用户处理不同工作流模型的权限和管理RSBDPDL文档库的访问权限;
所述协同编辑界面,用于为多个专家提供编辑表达遥感大数据处理工作流模型的在线协同界面;
所述冲突处理组件,用于处理在协同编辑的过程中所出现的冲突点,然后回退至协同编辑界面重新编辑,直至冲突消除;
所述RSBDPDL文档库,用于存储遥感大数据处理工作流模型;
所述工作流引擎模块,用于对专家共同构建的遥感大数据处理工作流模型进行解析、执行并提供分布式任务管理;
所述遥感大数据处理资源管理子系统,用于采用层次型多Agent对遥感应用系统中所需资源进行组织和管理;所述资源包括遥感数据资源和功能资源;所述遥感大数据处理资源管理子系统包括资源标准化统一描述框架、异构资源注册封装模块和标准化资源管理模块;
所述资源标准化统一描述框架,用于采用本体技术提供一个对异构资源进行统一描述的资源标准化表达模板;所述资源标准化表达模板包括遥感数据资源结构描述和功能资源结构描述;
所述异构资源注册封装模块,用于提供异构资源的注册功能和服务化封装功能;
所述标准化资源管理模块,用于对已经注册过的标准化资源进行组织管理;
所述遥感大数据处理计算平台,用于提供整个工作流系统分布式部署的计算环境;所述遥感大数据处理计算平台包括Spark计算服务集群和分布式数据存储系统;
所述Spark计算服务集群,用于采用Spark搭建云服务器集群,将遥感数据资源和功能资源部署到集群中的各分布式节点上;以及将到达遥感大数据处理计算平台的遥感数据处理的任务节点转换为in-Tree任务图,构造调度集合并配置相应虚拟机执行;
所述分布式数据存储系统,用于提供海量遥感数据的个性化分布式存储管理服务。
2.根据权利要求1所述的动态自适应分布式协同工作流系统,其特征在于,所述工作流引擎模块包括过程模型解析组件、过程实例执行组件和分布式任务管理组件;
所述过程模型解析组件,用于对构建的工作流模型进行解析,生成可执行的有向图形式的过程实例;
所述过程实例执行组件,用于将有向图形式的过程实例,结合控制活动节点进行拓扑排序,拆分成多个遥感数据处理的任务,形成任务列表;
所述分布式任务管理组件,用于管理任务列表,将任务提交到遥感大数据处理计算平台中进行分布式处理,并向遥感大数据处理资源管理模块发送申请资源请求以获取每一个任务所需的资源。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于河南大学,未经河南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110467800.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种生猪养殖用粪便清理装置
 - 下一篇:基于AR增强现实的收费稽核方法及系统
 





