[发明专利]一种基于云计算的信息处理方法及系统在审
申请号: | 202110053931.8 | 申请日: | 2021-01-15 |
公开(公告)号: | CN112632155A | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 不公告发明人 | 申请(专利权)人: | 万文兰 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/26;G06F16/28;H04L29/06;H04L29/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 511400 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 计算 信息处理 方法 系统 | ||
1.一种基于云计算的信息处理方法,其特征在于,所述基于云计算的信息处理方法,包括以下步骤:
步骤一,信息采集模块利用数据采集设备获取待处理的信息数据,并且信息预处理模块利用数据预处理程序控制数据网关对获取的待处理的异构数据进行转换和集成,并将经过分流后的数据输送至中央控制模块;
步骤二,中央控制模块利用中央处理器协调控制所述基于云计算的信息处理系统各个模块的正常运行;用户在客户端通过服务请求提交模块利用请求提交程序向所述基于云计算的信息处理系统提交服务请求;
步骤三,通过信息处理模块利用信息处理程序基于云计算技术根据服务请求对分流后的数据进行处理,获取服务节点的负载情况;优化调节模块利用优化调节程序利用解析调度器对获取的需要动态调节负载的需求进行优化调节;
步骤四,通过大数据挖掘模块利用数据挖掘程序对处理后的数据进行挖掘,获取挖掘后的数据;通过Hive数据查询模块利用SQL接口实现数据的查询功能,并为Hbase数据仓库的各种存储表建立索引关系;
步骤五,通过数据存储模块利用Hbase数据仓库存储获取的待处理的信息数据、信息预处理结果、服务请求、服务节点负载情况、优化调节结果、挖掘后的数据,并进行数据分类,建立存储表索引关系;
步骤六,通过更新显示模块利用显示设备对获取的待处理的信息数据、信息预处理结果、服务请求、服务节点负载情况、优化调节结果、挖掘后的数据以及存储表索引关系的实时数据进行更新显示;
步骤一中,所述通过信息预处理模块利用数据预处理程序控制数据网关对获取的待处理的异构数据进行转换和集成,包括:
通过信息预处理模块统一异构数据标准格式的表现形式以及编写异构数据采集中间件,获取待处理的异构数据;
利用数据预处理程序将获取的异构数据按照不同模式、不同主题属性子进行聚类,通过聚类的形式形成可供分类的主题属性子以及模式;
通过数据网关根据分类约束对聚类形成的可供分类的主题属性子以及模式进行模式重组,选择一种带约束的模式对聚类形成的主题数据进行分类;
所述通过信息预处理模块统一异构数据标准格式的表现形式,包括:
建立主题树模型;
通过主题树模型将结构化、半结构化以及非结构化的异构数据映射至最终的统一标准格式XML scheme;
消除和屏蔽异构数据结构模式上的差异,统一异构数据集成的格式;
步骤三中,所述通过信息处理模块利用信息处理程序基于云计算技术根据服务请求对分流后的数据进行处理,包括:
通过信息处理模块利用解析调度器解析所述服务请求,获得服务请求类型和所需要的节点资源数量,并将解析结果发送至负载均衡器;
通过负载均衡器接收解析调度器发送的解析结果,基于所需要的服务器资源数量以及当前各个节点的负载情况,对节点负载进行预测;
信息处理程序基于云计算技术对负载均衡器进行检测,分析分流后数据的安全属性,并将检测和分析结果提交至中央处理器。
2.如权利要求1所述的基于云计算的信息处理方法,其特征在于,所述基于所需要的服务器资源数量以及当前各个节点的负载情况,对节点负载进行预测,包括:
负载均衡器从基于云计算的信息处理系统的各个节点的负载的数据集中提取采样序列,并进行预处理;
创建N维时间序列作为学习样本,用信息处理系统的各个节点的负载的 训练样本并基于设定的参数进行进行学习;
建立负载预测模型,通过负载预测模型对节点负载进行预测。
3.如权利要求1所述的基于云计算的信息处理方法,其特征在于,所述信息处理程序基于云计算技术对负载均衡器进行检测,分析分流后数据的安全属性,包括:
负载均衡器检测和分析分流后数据的安全属性;检测到异常事件后,查询黑名单和白名单并根据代码特征库和行为模式库分析;
如果识别为风险,则按照预定规则处理并发出警告;否则将分流后数据散列计算加密后向各节点查询,若查询成功则按照规则处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于万文兰,未经万文兰许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110053931.8/1.html,转载请声明来源钻瓜专利网。