[发明专利]数据存储方法、装置、电子设备及计算机可读存储介质有效
申请号: | 202110594663.0 | 申请日: | 2021-05-28 |
公开(公告)号: | CN113220729B | 公开(公告)日: | 2023-03-21 |
发明(设计)人: | 余利华;汪源;蒋鸿翔;温正湖;李莹 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/22;G06F16/27 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 王辉;阚梓瑄 |
地址: | 310052 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 装置 电子设备 计算机 可读 介质 | ||
1.一种数据存储方法,其特征在于,包括:
当检测到事务提交事件时,将所述事务提交事件对应的事务日志写入主节点的本地事务文件中;
获取所述主节点的本地事务文件中各事务日志对应的易失性数据;
将所述各事务日志对应的易失性数据写入所述主节点的一级缓存中;
基于数据筛选规则将所述一级缓存中的易失性数据上传至存储系统进行持久化;
其中,所述方法还包括:
将多个子区域中的目标子区域中的易失性数据标记为可覆盖;其中,所述一级缓存中包括所述多个子区域;
解除所述一级缓存中第二子区域与回刷标识的对应关系,并构建所述回刷标识与所述一级缓存中第三子区域的对应关系;所述第三子区域是目标子区域中基于区域写入顺序的最后一个目标子区域,所述多个子区域包括所述目标子区域;
其中,将多个子区域中的目标子区域中的易失性数据标记为可覆盖之后,所述方法还包括:
当接收到新的易失性数据时,将所述第三子区域存储的已持久化的易失性数据写入二级缓存中;
通过所述新的易失性数据覆盖所述第三子区域中的已持久化的易失性数据。
2.根据权利要求1所述的方法,其特征在于,将所述事务提交事件对应的事务日志写入主节点的本地事务文件中之后,所述方法还包括:
将所述事务日志发送至与所述主节点对应的从节点,以使得所述从节点根据所述事务日志对应的事务级别从多种复制模式中确定目标复制模式;
根据所述目标复制模式将所述事务日志复制到所述从节点的本地事务文件中。
3.根据权利要求2所述的方法,其特征在于,所述多种复制模式包括同步复制模式、半同步复制模式和异步复制模式。
4.根据权利要求3所述的方法,其特征在于,若所述目标复制模式为所述同步复制模式,则根据所述目标复制模式将所述事务日志复制到所述从节点的本地事务文件中的步骤包括:
基于所述同步复制模式读取所述事务日志并将所述事务日志发送至所述从节点,以使得所述从节点回放所述事务日志并将回放后的事务日志存储至所述从节点的本地事务文件中;
当接收到由所述从节点发送的第一反馈结果时,判定同步复制完成;其中,所述第一反馈结果表征所述事务日志已由所述主节点完全同步至所述从节点。
5.根据权利要求3所述的方法,其特征在于,若所述目标复制模式为所述半同步复制模式,则根据所述目标复制模式将所述事务日志复制到所述从节点的本地事务文件中的步骤包括:
基于所述半同步复制模式读取所述事务日志并将所述事务日志发送至所述从节点;
当接收到由所述从节点发送的第二反馈结果时,判定半同步复制完成;其中,所述第二反馈结果表征所述事务日志已由所述主节点半同步至所述从节点。
6.根据权利要求3所述的方法,其特征在于,若所述目标复制模式为所述异步复制模式,则根据所述目标复制模式将所述事务日志复制到所述从节点的本地事务文件中的步骤包括:
基于所述异步复制模式读取所述事务日志;
将所述事务日志发送至所述从节点,并判定异步复制完成。
7.根据权利要求2所述的方法,其特征在于,将所述事务日志发送至与所述主节点对应的从节点,包括:
将所述事务日志发送至与所述主节点对应的从节点,以使得所述从节点读取所述事务日志的配置参数,并在所述配置参数满足持久化条件时对所述事务日志进行持久化存储。
8.根据权利要求1所述的方法,其特征在于,将所述各事务日志对应的易失性数据写入所述主节点的一级缓存中,包括:
确定所述主节点的一级缓存中的写入标识;其中,所述各事务日志对应的易失性数据包括从节点已根据所述事务日志回放的数据;
将所述各事务日志对应的易失性数据写入与所述写入标识对应的第一子区域;其中,所述一级缓存包括多个子区域,所述多个子区域中包括所述第一子区域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110594663.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种智能阀门开关装置
- 下一篇:智能化阀门装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置