[发明专利]节点处理方法及装置、存储介质和电子设备有效
申请号: | 201810858537.X | 申请日: | 2018-07-31 |
公开(公告)号: | CN109067649B | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 李耀宗;梁海安 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | H04L12/721 | 分类号: | H04L12/721;H04L29/08;H04L12/24 |
代理公司: | 深圳市隆天联鼎知识产权代理有限公司 44232 | 代理人: | 刘抗美 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 节点 处理 方法 装置 存储 介质 电子设备 | ||
本发明公开了一种节点处理方法及装置、存储介质和电子设备,涉及数据存储技术领域。本公开的节点处理方法及装置应用于influxdb集群,influxdb集群包括多个已配置节点和一新增节点,其中,该节点处理方法包括:获取集群中各已配置节点的每一数据槽的路由统计信息;根据所述每一数据槽的路由统计信息确定各已配置节点的路由压力;根据所述各已配置节点的路由压力将集群中已配置节点的数据槽转移到所述新增节点上。本公开可以解决现有influxdb集群中节点存储压力大而无法满足业务需求的问题。
技术领域
本公开涉及数据存储技术领域,具体而言,涉及一种节点处理方法、节点处理装置、存储介质和电子设备。
背景技术
时序数据库以其时间有序、直观、便于区分等优点,越来越受到开发人员青睐。作为目前关注度最高的时序数据库之一,influxdb已广泛应用到例如日志监控的多个应用场景中。
由于网络、节点硬件设备、业务内容等原因,influxdb集群可能与实际存储业务不匹配。例如,随着业务量的增多,现有的influxdb集群的存储量已经无法满足存储需求,在这种情况下,在influxdb集群中添加新的存储节点已经成为较好地解决存储瓶颈的方案。而目前,没有在influxdb集群中添加节点的方案。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的目的在于提供一种节点处理方法、节点处理装置、存储介质和电子设备,进而至少在一定程度上解决现有influxdb集群中节点存储压力大的问题。
根据本公开的一个方面,提供一种节点处理方法,应用于influxdb集群,influxdb集群包括多个已配置节点和一新增节点,所述节点处理方法包括:获取集群中各已配置节点的每一数据槽的路由统计信息;根据所述每一数据槽的路由统计信息确定各已配置节点的路由压力;根据所述各已配置节点的路由压力将集群中已配置节点的数据槽转移到所述新增节点上。
在本公开的一种示例性实施例中,每隔预定时间将所述集群中各数据槽的路由统计信息持久化到一配置文件中;其中,获取集群中各已配置节点的每一数据槽的路由统计信息包括:从所述配置文件中获取集群中各已配置节点的每一数据槽的路由统计信息。
在本公开的一种示例性实施例中,所述路由压力为节点上所有数据槽在一预设时间段内的路由次数。
在本公开的一种示例性实施例中,根据所述各已配置节点的路由压力将集群中已配置节点的数据槽转移到所述新增节点上包括:计算集群中n个已配置节点的路由压力总和;其中,n为集群中已配置节点的节点总数量;将所述路由压力总和与n+1的比值作为平均路由压力;根据所述平均路由压力将集群中已配置节点的数据槽转移到所述新增节点上,使新增节点的路由压力为所述平均路由压力。
在本公开的一种示例性实施例中,根据所述平均路由压力将集群中已配置节点的数据槽转移到所述新增节点上包括:确定所述已配置节点中路由压力大于所述平均路由压力的节点作为待转移节点;将所述待转移节点的数据槽转移到所述新增节点上。
在本公开的一种示例性实施例中,将所述待转移节点的数据槽转移到所述新增节点上包括:根据所述待转移节点的路由压力的比例将所述待转移节点的数据槽转移到所述新增节点上。
在本公开的一种示例性实施例中,将所述待转移节点的数据槽转移到所述新增节点上包括:确定各所述待转移节点的路由压力超出所述平均路由压力的压力超出量;计算各所述待转移节点的压力超出量的比例;根据压力超出量的比例将所述待转移节点的数据槽转移到所述新增节点上。
根据本公开的一个方面,提供一种节点处理装置,应用于influxdb集群,influxdb集群包括多个已配置节点和一新增节点,所述节点处理装置包括可以包括路由信息获取模块、路由压力确定模块和数据槽转移模块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810858537.X/2.html,转载请声明来源钻瓜专利网。