[发明专利]数据管理方法、系统、装置、计算机设备及存储介质有效
申请号: | 201910455447.0 | 申请日: | 2019-05-29 |
公开(公告)号: | CN110231915B | 公开(公告)日: | 2022-04-01 |
发明(设计)人: | 徐子晨;黄嘉诚;高剑林;陈伟;邸欣晨 | 申请(专利权)人: | 南昌大学;腾讯科技(深圳)有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 黄晶晶 |
地址: | 330000 *** | 国省代码: | 江西;36 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据管理 方法 系统 装置 计算机 设备 存储 介质 | ||
本申请涉及一种数据管理方法、系统、装置、计算机设备及存储介质,该方法包括:通过集群中的主节点接收当前的数据处理请求;当数据处理请求中包括写请求时,响应于所述写请求在主节点中写入数据,并生成包括所述数据的数据记录块;向所述主节点的辅助节点分发所述数据记录块;所述数据记录块,用于被转发至与各辅助节点分别对应的从节点,以指示在各从节点中复制所述数据记录块中记录的所述数据并存储;所述辅助节点,是不参与投票和竞选的节点。本申请的方案,能够提高数据管理效率。
技术领域
本发明涉及计算机技术领域,特别是涉及一种数据管理方法、系统、装置、计算机设备及存储介质。
背景技术
随着科学技术的飞速发展,大量先进技术不断涌现。分布式存储技术凭借其良好的稳定性,受到越来越广泛的应用。对于分布式存储技术而言,数据存储一致性至关重要。
传统方法中,由分布式存储的集群中的主节点,统一向各个从节点分别分发数据,并需要在等到所有从节点的应答之后,才能完成数据的一致性存储。这样一来,由一个主节点进行数据的分发以及应答等待,造成数据管理的效率比较低。
发明内容
基于此,有必要针对传统方法存在的成本比较高的问题,提供一种数据管理方法、系统、装置、计算机设备及存储介质。
一种数据管理方法,所述方法包括:
通过集群中的主节点接收当前的数据处理请求;
当数据处理请求中包括写请求时,响应于所述写请求在主节点中写入数据,并生成包括所述数据的数据记录块;
向所述主节点的辅助节点分发所述数据记录块;所述数据记录块,用于被转发至与各辅助节点分别对应的从节点,以指示在各从节点中复制所述数据记录块中记录的所述数据并存储;所述辅助节点,是不参与投票和竞选的节点。
在其中一个实施例中,所述辅助节点包括第一节点;第一节点用于转发数据记录块至对应的从节点;所述数据记录块被分发至所述第一节点。
在其中一个实施例中,所述辅助节点还包括第二节点;所述方法还包括:
当数据处理请求中包括读请求时,则从所述集群的从节点中为所述读请求分配相应的目标从节点;
其中,所述读请求,用于被所述目标从节点转发至与所述目标从节点对应的第二节点,以指示所述第二节点处理所述读请求;被转发至的第二节点存储有所述目标从节点中的最新版本的数据。
在其中一个实施例中,所述数据记录块,还用于指示各辅助节点之间对接收到的所述数据记录块进行一致性校验,并在一致性校验通过后,将所述数据记录块转发至与各辅助节点对应的从节点。
在其中一个实施例中,所述方法还包括:
获取辅助节点的创建数量;
确定节点位置组合;所述节点位置组合中包括符合所述创建数量的辅助节点的位置;
在所述节点位置组合中包括的辅助节点的各位置处,创建所述主节点的辅助节点。
在其中一个实施例中,所述确定节点位置组合包括:
获取候选的节点位置组合;各候选的节点位置组合中包括符合所述创建数量的辅助节点的位置;
预测各节点位置组合对应的集群的性能值;各集群的性能值,为当辅助节点建立于各候选的节点位置组合中的相应位置处时所述集群的性能指标数值;
从各所述候选的节点位置组合中,选取对应于最大性能值的节点位置组合。
在其中一个实施例中,所述预测各节点位置组合对应的集群的性能值包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南昌大学;腾讯科技(深圳)有限公司,未经南昌大学;腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910455447.0/2.html,转载请声明来源钻瓜专利网。