[发明专利]一种异构服务系统的融合管理系统及方法在审
申请号: | 202111217549.2 | 申请日: | 2021-10-19 |
公开(公告)号: | CN113886354A | 公开(公告)日: | 2022-01-04 |
发明(设计)人: | 程名;钟磊 | 申请(专利权)人: | 重庆富民银行股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21 |
代理公司: | 重庆强大凯创专利代理事务所(普通合伙) 50217 | 代理人: | 赵玉乾 |
地址: | 401121 重庆市渝*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 服务 系统 融合 管理 方法 | ||
1.一种异构服务系统的融合管理方法,包括采集多源数据,对多源数据进行预处理,所述预处理包括数据清洗转换,其特征在于,还包括对单节点存储负载进行判断,根据判断结果按照存储负载程度构建出空载节点有序队列,将索引数据进行切分,根据空载节点有序队列采用分布式索引方式将切分后的数据分布到不同的空载节点进行存储,根据同一空载节点存储的数据生成两个副本数据,判断某个空载节点是否存储有切分后的数据,若否,则将生成的副本数据存储至该空载节点中。
2.根据权利要求1所述的异构服务系统的融合管理方法,其特征在于,切分后的数据根据存储负载程度随机分布到不同的空载节点进行存储。
3.根据权利要求1所述的异构服务系统的融合管理方法,其特征在于,还包括在将切分后的数据分布到不同的空载节点进行存储后,对已存储有切分后的数据的空载节点再次进行存储负载判断,若计算出某一空载节点已满载,则将该空载节点标记为满载节点。
4.根据权利要求1所述的异构服务系统的融合管理方法,其特征在于,还包括计算每一个空载节点可存储的数据量,并将切分后各个数据的数据量与各个空载节点可存储的数据量进行匹配,将切分后的数据存储到匹配度高的空载节点中。
5.根据权利要求3所述的异构服务系统的融合管理方法,其特征在于,还包括对存储节点进行超负载计算,若计算出某一存储节点是超负载节点,则对该超负载节点进行数据迁移,将数据迁移到空载节点中。
6.一种异构服务系统的融合管理系统,包括多源数据采集模块,用于采集多源数据;多源数据预处理模块,用于对多源数据进行预处理,所述预处理包括数据清洗转换;其特征在于,还包括存储负载判断模块,用于对单节点存储负载进行判断,以计算出空载节点,并按照存储负载程度构建出空载节点有序队列;索引数据存储模块,用于将索引数据进行切分,根据空载节点有序队列采用分布式索引方式将切分后的数据分布到不同的空载节点;副本生成模块,用于根据同一空载节点存储的数据生成两个副本数据;空载节点存储数据判断模块,用于判断某个空载节点是否存储有切分后的数据;副本数据存储模块,用于在某个空载节点未存储有切分后的数据时,将生成的副本数据存储至该空载节点中。
7.根据权利要求6所述的异构服务系统的融合管理系统,其特征在于,还包括节点标记模块,用于对已存储有切分后的数据的空载节点进行存储负载判断,若计算出某一空载节点已满载,则将该空载节点标记为满载节点。
8.根据权利要求7所述的异构服务系统的融合管理系统,其特征在于,还包括数据量匹配模块,用于计算每一个空载节点可存储的数据量,并将切分后各个数据的数据量与各个空载节点可存储的数据量进行匹配,将切分后的数据存储到匹配度高的空载节点中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆富民银行股份有限公司,未经重庆富民银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111217549.2/1.html,转载请声明来源钻瓜专利网。