[发明专利]一种基于图覆盖的大数据全比较的数据分配方法及系统

摘要

本发明公开一种基于图覆盖的大数据全比较的数据分配方法及系统，所述数据分配方法包括：将M个待处理数据文件抽象为图的顶点，任意两个待处理数据文件之间的比较计算抽象为图的边，将M个待处理数据文件的全比较计算映射为一个完全图GM；将完全图GM划分为N个诱导图，且各诱导图的联合能够覆盖完全图GM以及使max{|V1|,|V2|,...,|VN|}最小化；根据各诱导图确定最优覆盖解；根据所述最优覆盖解，依次将待处理数据分配到各计算节点。本发明通过待处理数据文件抽象为图的顶点，比较计算抽象图的边，从而将待处理数据文件的全比较计算映射为一个完全图，将图覆盖方法引入，来解决全比较计算的数据分配问题，并进一步通过划分诱导图确定最优覆盖解，实现数据分配的全局最优性。

主权项

一种基于图覆盖的大数据全比较的数据分配方法，其特征在于，所述数据分配方法包括：将M个待处理数据文件抽象为图的顶点，任意两个待处理数据文件之间的比较计算抽象为图的边，将M个待处理数据文件的全比较计算映射为一个完全图GM；所述完全图为每对顶点之间连接有一条边形成的图；将完全图GM划分为N个诱导图，分别为G(V1),G(V2),...,G(VN)，且各诱导图的联合能够覆盖完全图GM以及使max{|V1|,|V2|,...,|VN|}最小化；其中，V表示点集合，|VN|表示第N个诱导图中点集合中的点的个数；根据各诱导图确定最优覆盖解；根据所述最优覆盖解，依次将待处理数据分配到各计算节点。