[发明专利]数据分析方法、装置、服务器及可读存储介质有效
| 申请号: | 201910423710.8 | 申请日: | 2019-05-21 |
| 公开(公告)号: | CN110275880B | 公开(公告)日: | 2023-05-30 |
| 发明(设计)人: | 袁锦程;王维强;许辽萨;赵闻飙;席云;鲍晟霖;易灿 | 申请(专利权)人: | 创新先进技术有限公司 |
| 主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/21;G06F16/2458;G06F16/248 |
| 代理公司: | 北京众达德权知识产权代理有限公司 11570 | 代理人: | 刘杰 |
| 地址: | 开曼群岛大开曼岛*** | 国省代码: | 暂无信息 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 数据 分析 方法 装置 服务器 可读 存储 介质 | ||
1.一种数据分析方法,包括:
得到初始数据;
针对建立数据模型所采用的算法类型,从预置的数据分析工具集中匹配出与所述算法类型对应的数据分析工具,利用所述数据分析工具对所述初始数据进行特征工程,确定出符合目标特性的目标数据;
输出所述目标数据,作为数据模型的依据;
所述针对建立数据模型所采用的算法类型,从预置的数据分析工具集中匹配出与所述算法类型对应的数据分析工具,包括:
判断建立数据模型所采用的算法类型是深度学习算法还是非深度学习算法:
对于深度学习算法,采用预先设定有局部保真模块的数据分析工具;
对于非深度学习算法,采用预先设定有编程语言封装体或目标扰动模块的数据分析工具。
2.根据权利要求1所述的方法,还包括:
接收数据模型性能反馈信息,其中,所述数据模型是依据所述目标数据作为样本数据建立的;
根据所述反馈信息,修正所述数据分析工具。
3.根据权利要求2所述的方法,还包括:将所述反馈信息记录在反馈数据库中;
所述根据所述反馈信息,修正所述数据分析工具,包括:查询所述反馈数据库,调取出针对所述数据分析工具的所有反馈信息;根据所述所有反馈信息,评估特定数据分析工具的特征工程可信度;根据所述特征工程可信度,调整所述数据分析工具的指标参数。
4.根据权利要求1所述的方法,对于深度学习算法,所述利用所述数据分析工具对所述初始数据进行特征工程,包括:
利用所述数据分析工具中的局部保真模块,确定所述初始数据的至少一个维度的特征以及各个维度特征的特征值;
对各维度特征以特征值进行维度累积,确定满足特征值阈值的目标数据;
以可视化的HTML格式展示界面的形式显示所述目标数据。
5.根据权利要求4所述的方法,所述利用所述数据分析工具中的局部保真模块,确定所述初始数据的至少一个维度的特征以及各个维度特征的特征值,包括:
针对数据模型的所有特征,掩盖掉部分特征,保留局部特征;
分析局部特征对标签的相关性,根据相关性高低确定特征值的高低。
6.根据权利要求1所述的方法,对于非深度学习算法,所述利用所述数据分析工具对所述初始数据进行特征工程,包括:
利用所述数据分析工具中的编程语言封装体或目标扰动模块,确定所述初始数据的至少一个维度的特征以及各个维度特征的特征值;
对各维度特征以特征值进行维度累积,确定满足特征值阈值的目标数据;
以可视化的图形或表格形式显示所述目标数据。
7.根据权利要求6所述的方法,利用所述数据分析工具中的编程语言封装体,确定所述初始数据的至少一个维度的特征以及各个维度特征的特征值,包括:
向用户提供具有封装了特定编程语言的编程语言封装体的点选系统,接收用户针对数据特征选择的点选操作,或者向用户提供编程语言封装体的程序编写界面,接收用户针对数据特征的编程代码;
根据所述点选操作或编程代码,确定所述初始数据的至少一个维度的特征,并通过各维度特征与标签的相关性,确定出各维度特征的特征值。
8.根据权利要求6所述的方法,利用所述数据分析工具中的目标扰动模块,确定所述初始数据的至少一个维度的特征以及各个维度特征的特征值,包括:
确定所有标签及标签值,并统计满足至少一个标签的各个维度的特征以及特征值;
去掉一部分标签或者将一部分标签值进行降低,从而进行目标扰动;
统计目标扰动后各维度特征的特征值的变化,保留特征值变化量超过特征值变化阈值的特征及其特征值。
9.根据权利要求1所述的方法,在匹配数据分析工具的过程中,还包括:
确定所述初始数据的数据类型或格式;
在选择数据分析工具时,结合所述初始数据的数据类型或格式,确定出相适应的数据分析工具。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于创新先进技术有限公司,未经创新先进技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910423710.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





