[发明专利]一种针对云环境运行数据的分析方法及系统有效
申请号: | 201811618288.3 | 申请日: | 2018-12-28 |
公开(公告)号: | CN111400335B | 公开(公告)日: | 2023-09-19 |
发明(设计)人: | 唐文桦;朱逊 | 申请(专利权)人: | 上海群蚁信息科技有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F40/30;G06F40/284 |
代理公司: | 上海愉腾专利代理事务所(普通合伙) 31306 | 代理人: | 唐海波 |
地址: | 200336 上海市长宁*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 针对 环境 运行 数据 分析 方法 系统 | ||
1.一种针对云环境运行数据的分析方法,其特征在于,所述方法包括以下步骤:
收集云环境运行数据和云环境日志数据,包括收集日志文件,对日志文件进行初步分析;
对收集到的数据进行存储和处理,包括判断文件的具体内容是否支持直接的格式化,如果是则直接进行参数归类,如果否则先进行语义识别,并根据识别进行语义分词,结束后再进行参数归类,进行数据结构化转变,并将结果存储入库;
通过机器学习对数据进行分析,包括对已存储的数据进行探索和预处理,进行数据清理、数据转换和补充规范数据,生成训练数据和测试数据,生成训练模型和测试模型并进行优化形成一个确定的业务模型,部署模型进一步进行数据分析;
通过机器学习的方法,能够运用实践规则对系统运行状况进行判定,最终给出机器学习的结果,对结果进行展示。
2.根据权利要求1所述的针对云环境运行数据的分析方法,其特征在于,所述对收集到的数据进行存储和处理包括:存储原始的运行数据和非结构化数据。
3.根据权利要求1所述的针对云环境运行数据的分析方法,其特征在于,所述方法包括以下步骤:收集到的数据通过http方式的接口进行传输。
4.一种针对云环境运行数据的分析系统,其特征在于,所述系统包括:
收集引擎,用于收集云环境运行数据和云环境日志数据,包括收集日志文件,对日志文件进行初步分析;
数据层模块,用于对收集到的数据进行存储和处理,包括判断文件的具体内容是否支持直接的格式化,如果是则直接进行参数归类,如果否则先进行语义识别,并根据识别进行语义分词,结束后再进行参数归类,进行数据结构化转变,并将结果存储入库;
分析展示平台,用于通过机器学习对数据进行分析,包括对已存储的数据进行探索和预处理,进行数据清理、数据转换和补充规范数据,生成训练数据和测试数据,生成训练模型和测试模型并进行优化形成一个确定的业务模型,部署模型进一步进行数据分析;
展示模块,用于通过机器学习的方法,能够运用实践规则对系统运行状况进行判定,最终给出机器学习的结果,并对结果进行展示。
5.根据权利要求4所述的针对云环境运行数据的分析系统,其特征在于,所述收集引擎通过微服务的开发部署方式进行部署和配置,并通过API接口对接分析展示平台。
6.根据权利要求4所述的针对云环境运行数据的分析系统,其特征在于,所述分析展示平台包括机器学习模块。
7.根据权利要求4所述的针对云环境运行数据的分析系统,其特征在于,所述展示模块包括UI界面。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海群蚁信息科技有限公司,未经上海群蚁信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811618288.3/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置