[发明专利]特征聚类处理方法、集群服务器及可读存储介质有效
| 申请号: | 201911124455.3 | 申请日: | 2019-11-14 |
| 公开(公告)号: | CN110874615B | 公开(公告)日: | 2023-09-26 |
| 发明(设计)人: | 陈瑞钦;黄启军;林冰垠;李诗琦;唐兴兴 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
| 主分类号: | G06F18/23 | 分类号: | G06F18/23;G06F18/2113 |
| 代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 王韬 |
| 地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 特征 处理 方法 集群 服务器 可读 存储 介质 | ||
1.一种特征聚类处理方法,其特征在于,应用于分布式集群服务器,所述分布式集群服务器包括一个控制节点和多个计算节点,所述方法包括:
通过所述控制节点按照预设矩阵规则将待聚类处理的特征集拆分为多个数据块,并将所述多个数据块存储至所述多个计算节点中,以供所述多个计算节点基于所述多个数据块进行运算,从而确定所述特征集的协方差矩阵;
通过所述控制节点根据所述特征集的协方差矩阵判断所述特征集是否满足预设拆分条件;
若满足,则通过所述控制节点对所述特征集进行拆分处理以获得子聚类;
通过所述控制节点根据拆分得到的所述子聚类所包含的特征和所述特征集的协方差矩阵,确定所述子聚类的协方差矩阵;
若所述控制节点根据所述子聚类的协方差矩阵确定所述子聚类满足预设拆分条件,则对所述子聚类进行拆分处理;
所述根据所述特征集的协方差矩阵判断所述特征集是否满足预设拆分条件的步骤,包括:
根据所述特征集的协方差矩阵,选取数值最大的第一特征值和第二特征值,其中所述第一特征值大于或等于所述第二特征值;
判断所述第二特征值是否大于或等于预设特征值;
若所述第二特征值大于或等于所述预设特征值时,则所述特征集满足所述预设拆分条件;
若所述第二特征值小于所述预设特征值时,则所述特征集不满足所述预设拆分条件。
2.如权利要求1所述的特征聚类处理方法,其特征在于,所述通过所述控制节点按照预设矩阵规则将待聚类处理的特征集拆分为多个数据块,并将所述多个数据块存储至所述多个计算节点中,以供所述多个计算节点基于所述多个数据块进行运算,从而确定所述特征集的协方差矩阵的步骤,包括:
获取所述特征集,并将所述特征集按矩阵的形式进行存储;
将所述特征集按预设矩阵规则拆分为所述多个数据块,并将所述多个数据块分别一一分配至多个计算节点;
根据分别位于所述多个计算节点的所述多个数据块计算所述特征集的协方差矩阵。
3.如权利要求1所述的特征聚类处理方法,其特征在于,所述通过所述控制节点根据拆分得到的所述子聚类所包含的特征和所述特征集的协方差矩阵,确定所述子聚类的协方差矩阵的步骤,包括:
通过所述控制节点根据所述子聚类所包含的特征在所述特征集的矩阵形式中的行列位置,提取出与所述行列位置相对应的所述特征集的协方差矩阵的行向量或列向量,确定所述子聚类的协方差矩阵。
4.如权利要求1所述的特征聚类处理方法,其特征在于,所述若满足,则通过所述控制节点对所述特征集进行拆分处理以获得子聚类的步骤,包括:
若所述特征集满足所述预设拆分条件时,则根据所述特征集的协方差矩阵选取出数值最大的所述第一特征值和所述第二特征值,并根据所述第一特征值和所述第二特征值将所述特征集预拆分为第一子聚类和第二子聚类;
获取与所述第一子聚类的协方差矩阵相对应的数值最大的第三特征值,获取与所述第二子聚类的协方差矩阵相对应的数值最大的第四特征值;根据所述第三特征值和所述第四特征值,将所述第一子聚类和所述第二子聚类进行调整,得到调整后的第三子聚类和第四子聚类;
判断所述第三子聚类与所述第一子聚类是否相同,以及所述第四子聚类与所述第二子聚类是否相同;
若不相同,则将所述第一子聚类更新为所述第三子聚类,所述第二子聚类更新为所述第四子聚类,并重新执行所述获取与所述第一子聚类的协方差矩阵相对应的数值最大的第三特征值,获取与所述第二子聚类的协方差矩阵相对应的数值最大的第四特征值;根据所述第三特征值和所述第四特征值,将所述第一子聚类和所述第二子聚类进行调整,得到调整后的第三子聚类和第四子聚类的步骤;
若相同,则将所述特征集拆分为所述第一子聚类和所述第二子聚类。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911124455.3/1.html,转载请声明来源钻瓜专利网。





