[发明专利]一种数据处理方法及装置在审
申请号: | 201710683566.2 | 申请日: | 2017-08-11 |
公开(公告)号: | CN107515908A | 公开(公告)日: | 2017-12-26 |
发明(设计)人: | 汪利鹏;赵丹;牟远;王勇 | 申请(专利权)人: | 新智数通(北京)技术服务有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京品源专利代理有限公司11332 | 代理人: | 孟金喆 |
地址: | 100102 北京市朝*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 装置 | ||
1.一种数据处理方法,其特征在于,包括:
获取待处理电子表格数据;
查询所述待处理电子表格数据中包含非数字信息的列,将查询到的列进行数字化处理,生成处理电子表格数据;
根据所述待处理电子表格数据获取多组聚类组合,其中每组聚类组合包含至少一个聚类字段,每个聚类字段是所述待处理电子表格数据中的一个列字段;
提取一组聚类组合,根据所述聚类组合查询所述处理电子表格数据中对应信息,将所述对应信息进行聚类分析,获取指定的多个聚类样本,统计每个聚类样本占所述对应信息的比例后进行保存;统计所述聚类组合中每个聚类字段下的对应信息分别在所述每个聚类样本中所占的比例后进行保存;
返回执行提取一组聚类组合的操作,直至预设的多组聚类组合全部处理完毕。
2.根据权利要求1所述的方法,其特征在于,获取待处理电子表格数据,包括:
获取原始电子表格数据;
将所述原始电子表格数据中不需要进行聚类统计分析的列字段以及该列字段对应的信息删除;
将所述原始电子表格数据中包含多个子字段的列字段进行拆分,生成待处理电子表格数据。
3.根据权利要求1所述的方法,其特征在于,查询所述待处理电子表格数据中包含非数字信息的列,将查询到的列进行数字化处理之前,还包括:
将所述待处理电子表格数据中的标题行中列字段及其所对应的列的序号保存至第一字典表变量;
根据所述待处理电子表格数据获取多组聚类组合,包括:
获取所述第一字典表变量中的多个列字段;
将所述多个列字段进行不同组合生成多组聚类组合,将所述多组聚类组合保存至第一工作表。
4.根据权利要求1所述的方法,其特征在于,所述非数字信息包括汉字信息、空值信息和空字符串信息;
查询所述待处理电子表格数据中包含非数字信息的列,将查询到的列进行数字化处理,生成处理电子表格数据,包括:
将所述汉字信息按照字段进行分组,删除每组中重复信息,并将不重复信息进行排序;
将所述不重复信息按照排序进行数字编号,将所述数字编号保存至第二字典表变量;
根据所述第二字典表变量中的信息,将汉字信息转换为对应的数字编号;
将所述空值信息和空字符串信息转换为特定数字。
5.根据权利要求1所述的方法,其特征在于,将所述对应信息进行聚类分析,获取指定的多个聚类样本,包括:
从所述对应信息中随机选取K个作为聚类中心;
将所述对应信息中的其它信息按照最小距离原则分配至最邻近的聚类中心对应的聚类,得到K个聚类样本;
将所述K个聚类样本中每个聚类样本中的样本均值作为新的聚类中心;
返回执行将所述对应信息中的其它信息按照最小距离原则分配至最邻近的聚类中心对应的聚类,得到K个聚类样本的操作,直至聚类中心不再变化时,获取当前的K个聚类样本作为指定的多个聚类样本。
6.根据权利要求1所述的方法,其特征在于,将统计的每个聚类样本占所述对应信息的比例保存至第二工作表;将统计的所述聚类组合中每个聚类字段下的对应信息分别在所述每个聚类样本中所占的比例保存至第三工作表;
在统计所述聚类组合中每个聚类字段下的对应信息分别在所述每个聚类样本中所占的比例后保存至第三工作表之后,还包括:
将所述第二工作表和所述第三工作表保存至由各个聚类字段命名的第一工作簿中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新智数通(北京)技术服务有限公司,未经新智数通(北京)技术服务有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710683566.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:尾气蓄热氧化焚烧系统
- 下一篇:无烟炉