[发明专利]一种基于云计算平台的大数据聚类方法及系统

权利要求书

1.一种基于云计算平台的大数据聚类方法，其特征在于，包括以下步骤：

步骤100、收集数据对象并识别所述数据对象的直接特征，并对所述数据对象深度剖析以区分不同种类的所述数据对象和汇聚相同种类的所述数据对象；

在步骤100中，利用预处理池暂存所述数据对象并确定每种所述数据对象的直接特征，将每种所述数据对象的直接特征作为分类层树状图的起点，并按照自底向上的方式建立整个关于不同种类的所述数据对象的所述分类层树状图；

计算所有数据对象的所述直接特征之间的关联权重，且将具有相同权重的多个所述直接特征合并为对应所述分类层树状图的一个下层聚类分项；

继续计算所有所述下层聚类分项之间的关联权重，且将所述关联权重值大的多个所述下层聚类分项合并为中层聚类分项；

重复上述操作，如最上层的两个所述聚类分项之间的关联权重大于零，则建立一个所述分类层树状图；

若最上层的两个所述聚类分项之间的关联权重等于零，则分别建立两个以上的所述分类层树状图；

步骤200、将所述数据对象的特征细化以创建分类层树状图，且所述数据对象的聚类深度与所述分类层树状图的分级自下到上一一匹配；

创建所述分类层树状图的实现方式为：

确定每种所述数据对象的多层深度特征，并计算两种所述数据对象的不同深度特征之间的关联权重；

根据关联权重确定处于同一个所述分类层树状图的所述数据对象；

根据处于同一个所述分类层树状图的所述数据对象的深度特征，确定所述分类层树状图的聚类分项，且所述分类层树状图的最下层直接对应所述数据对象的直接特征，所述分类层树状图自下向上凝聚分层聚类；

步骤300、根据所述数据对象的直接特征确定所述数据对象在所述分类层树状图内的分支路径，并利用转换模型确定所述数据对象的聚类分项，以对大数据分类聚簇保存。

2.根据权利要求1所述的一种基于云计算平台的大数据聚类方法，其特征在于：所述数据对象的直接特征为所述数据对象携带的参数信息，所述数据对象的深度特征以所述数据对象的直接特征为起点，自下到上的确定所述数据对象在应用场景内的实际含义，且不同种类的所述数据对象的实际含义不同，以将所述数据对象对应所述分类层树状图同级的不同分支，通过对所述数据对象的实际含义溯源以确定所述分类层树状图的聚类焦点。

3.根据权利要求1所述的一种基于云计算平台的大数据聚类方法，其特征在于：根据所述数据对象的直接特征的实际含义以及所述聚类分项的实际含义，利用专家评定法设定不同的所述直接特征之间的关联权重以及不同的所述聚类分项之间的关联权重，选择所述关联权重超过设定值的所述直接特征聚集到同一个所述聚类分项，且将所述关联权重超过设定值的所述聚类分项聚集到上一层的同一个所述聚类分项。

4.根据权利要求2所述的一种基于云计算平台的大数据聚类方法，其特征在于：所述分类层树状图的每条分支表示所述数据对象的存储路径，并建立同一个所述分类层树状图内多个所述数据对象对应的数据保存库，且设定每个所述按照数据保存库的保存路径，且所述数据保存库的保存路径与所述分类层树状图形成的存储路径相同，所述预处理池内暂存的所述数据对象按照所述保存路径对应保存在所述数据保存库内。

5.根据权利要求2所述的一种基于云计算平台的大数据聚类方法，其特征在于：在所述步骤300中，所述分类层树状图的聚类分项从上到下依次分为聚类焦点、一级分类节点、二级分类节点、……、直接特征，根据每种所述数据对象的直接特征与所述分类层树状图中包含的直接特征进行匹配，以将所述数据对象按照保存路径聚类存储到相应的所述数据保存库。

6.一种应用于权利要求1-5任一项所述基于云计算平台的大数据聚类方法的大数据聚类系统，其特征在于，包括：

预存储池(1)，用于根据预存的少量的数据创建分类层树状图；

树状图设定模块(2)，用于将数据对象的每层细化特征通过设定的关联权重确定处于同一个节点的多个数据对象，自下到上的创建分类层树状图；

聚类存储模块(3)，用于将数据库按照所述分类层树状图的分支建立多个数据库，且将每种数据对象包含的数据均按照对应分类层树状图的分支的保存路径存储到所述数据库内。