[发明专利]松散环境下分布式大数据计算的中间件体系框架有效
申请号: | 201310233252.4 | 申请日: | 2013-06-13 |
公开(公告)号: | CN103324479A | 公开(公告)日: | 2013-09-25 |
发明(设计)人: | 朱方;孙建东 | 申请(专利权)人: | 南京南自信息技术有限公司 |
主分类号: | G06F9/44 | 分类号: | G06F9/44 |
代理公司: | 南京君陶专利商标代理有限公司 32215 | 代理人: | 沈根水 |
地址: | 210012 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 松散 环境 分布式 数据 计算 中间件 体系 框架 | ||
1.松散环境下分布式大数据计算中间件体系框架,对应于PAAS&IASS层,适用于云大数据计算应用,亦可应用于异构MPSoC及多电路板计算机体系软件运行环境中,其特征是包括代理模块,功能模块和功能管理模块,以视频分析处理为例各模块的操作步骤如下:
步骤一:通过数据源代理模块,连接数据源及格式转换功能管理模块,启动数据源及格式转换任务功能模块,功能管理模块同时分配共享内存通道作为数据源及格式转换任务功能模块输出,相关信息,包括共享内存接口信息,反映在代理模块中;
步骤二:通过算法代理模块, 连接算法功能管理模块,启动算法分析任务功能模块,功能管理模块同时分配共享内存通道作算法分析任务功能模块输入,相关信息,包括共享内存接口信息,反映在代理模块中;
步骤三:待处理云数据在信号的帮助下在共享内存的通道内高速传输,同时算法分析任务等功能模块以本地操作系统实现或硬件加速单元方式高速执行,并上传/存储相应分析结果;
步骤四:各功能模块的任务完成进度及任务状态将频繁的报给特定的功能管理模块,并等待代理模块请求时,应现有云框架的任务调度,状态监控需求时,由功能管理模块提交给代理模块;
步骤五:任务完成后,通过代理模块,提交请求给对应功能管理模块,关闭视频解码任务和算法分析任务功能模块。
2.根据权利要求1所述的松散环境下分布式大数据计算中间件体系框架,其特征是所述的功能模块,其结构包括类似于MPI的标准通讯信令接口,包括构造参数传递指令、状态上传指令、管理模块注册指令,标准用于大数据传递的共享内存接口,包括数据格式描述、数据有效性标识、数据所有者标识,标准功能,包括分析、解码执行模块,并为接口层加上实际硬件加速单元。
3.根据权利要求1所述的松散环境下分布式大数据计算中间件体系框架,其特征是所述功能管理模块,其结构包括类似于MPI的标准通讯信令接口,该接口包括对代理请求接口、对功能请求接口;代理管理模块含代理和对应功能的组合的管理;功能管理模块含功能生命周期和状态的管理。
4.根据权利要求1所述的松散环境下分布式大数据计算中间件体系框架,其特征是所述的代理,是包含在云分布式计算环境中的任务中,作为实际执行功能模块的代表并包含配置和状态信息,这些代理用下述的语言编写:java/C#/ECL,嵌入现有云分布式计算框架或异构MPSoC及多电路板计算机体系软件运行环境中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京南自信息技术有限公司,未经南京南自信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310233252.4/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置