[发明专利]一种适应云边协同多数据中心场景下的流数据处理方法及系统有效
申请号: | 202110215733.7 | 申请日: | 2021-02-26 |
公开(公告)号: | CN112817732B | 公开(公告)日: | 2022-11-11 |
发明(设计)人: | 夏飞;方泉;宋浒;杜元翰;杨华飞;俞俊;王鹏;张昕;牧军;张银铁;于聪;王丽君;万晶 | 申请(专利权)人: | 国网电力科学研究院有限公司;国网江苏省电力有限公司信息通信分公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F16/27 |
代理公司: | 南京苏高专利商标事务所(普通合伙) 32204 | 代理人: | 颜盈静 |
地址: | 211106 江苏省南*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 适应 协同 多数 中心 场景 数据处理 方法 系统 | ||
1.一种适应云边协同多数据中心场景下的流数据处理方法,其特征在于:包括以下执行内容:
根据分配到的子任务请求,将处理子任务请求需用到的计算资源、内存资源、网络资源和存储资源分配给虚拟机,虚拟机对待处理的流数据进行处理,得到当前处理结果;根据各子任务请求的串并行协同处理流程和各子任务请求的处理优先级,将当前处理结果发送至下一子任务请求所在的资源位置处;其中,所述待处理的流数据包括设备终端采集到的流数据或经设备终端/边缘端数据中心/云端数据中心处理后得到的处理结果,所述下一子任务请求为处理优先级仅次于当前子任务请求的子任务请求;
其中,所述子任务请求是由当前资源位置或其他资源位置对用户流任务需求进行拆分得到,所述资源位置包括终端设备、边缘端数据中心和云端数据中心;
在将当前处理结果发送至下一子任务请求所在的资源位置处之前,需判断下一子任务请求所在的资源位置的资源状态是否存在异常,若存在异常,则采用成本性能配置策略,将下一子任务请求转移至其他资源位置,若不存在异常,则将当前处理结果发送至下一子任务请求所在的资源位置,进行下一子任务请求处理。
2.根据权利要求1所述的一种适应云边协同多数据中心场景下的流数据处理方法,其特征在于:资源状态存在异常包括:终端设备/边缘端数据中心/云端数据中心上的资源无法满足下一子任务请求的处理要求和资源发生故障,所述资源包括计算资源、内存资源、网络资源和存储资源。
3.根据权利要求1所述的一种适应云边协同多数据中心场景下的流数据处理方法,其特征在于:还包括以下执行内容:
对其接收到的子任务请求的处理状态进行监测;
将监测到的子任务请求的处理状态同步至云端数据中心。
4.根据权利要求3所述的一种适应云边协同多数据中心场景下的流数据处理方法,其特征在于:所述的子任务请求的处理状态包括子任务请求的处理时长、衔接等待时长和子任务请求的请求时长。
5.根据权利要求4所述的一种适应云边协同多数据中心场景下的流数据处理方法,其特征在于:根据子任务请求的处理状态对成本性能配置策略进行调整,具体操作步骤如下:
各子任务请求的处理状态与预设概率计算表进行比对,并通过数据归纳法,调整概率计算表;
基于调整后的概率计算表改进成本性能配置策略;
所述的预设概率计算表根据边缘端数据中心资源成本、云端数据中心资源成本、流任务性能需求和流任务在特定时间的发生规律,生成得到;
所述成本性能配置策略为:
根据概率计算表,预留处理子任务请求的资源;
根据子任务请求的性能需求,将子任务请求分配至预留的资源中成本最低的资源上。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国网电力科学研究院有限公司;国网江苏省电力有限公司信息通信分公司,未经国网电力科学研究院有限公司;国网江苏省电力有限公司信息通信分公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110215733.7/1.html,转载请声明来源钻瓜专利网。