[发明专利]一种数据写入方法、装置及设备有效
| 申请号: | 202010979211.X | 申请日: | 2020-09-17 |
| 公开(公告)号: | CN112114753B | 公开(公告)日: | 2022-09-30 |
| 发明(设计)人: | 李丹旺;夏伟强 | 申请(专利权)人: | 杭州海康威视系统技术有限公司 |
| 主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F16/22;G06F16/2455;G06F16/21 |
| 代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 杨春香 |
| 地址: | 310051 浙江省杭州*** | 国省代码: | 浙江;33 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据 写入 方法 装置 设备 | ||
1.一种数据写入方法,其特征在于,所述方法包括:
获取待写入数据,将所述待写入数据划分为至少一个单元数据,并确定每个单元数据的索引信息,及每个单元数据在对象文件中的偏移位置;
针对每个单元数据,根据所述单元数据的索引信息确定所述单元数据对应的缓存块组;采用追加写方式将所述单元数据写入到所述缓存块组,根据所述单元数据的偏移位置将所述单元数据写入到所述缓存块组绑定的内存块;
在所述缓存块组中的单元数据满足迁移条件时,将所述缓存块组绑定的内存块中的单元数据迁移到数据区块;在数据库中记录已迁移到数据区块的单元数据的索引信息与该单元数据在所述数据区块中的存储位置的映射关系;
将所述缓存块组绑定的内存块中的单元数据迁移到数据区块,包括:根据所述单元数据的偏移位置确定所述单元数据所属的数据块;判断所述数据区块中是否已存在所述数据块;如果否,则从云存储介质中读取与所述数据块对应的已存储数据,对所述单元数据和所述已存储数据进行合并,得到合并后数据;在所述数据区块中创建所述数据块,将所述合并后数据写入到已创建的所述数据块中;如果是,从所述数据块中读取已存储数据,对所述单元数据和所述已存储数据进行合并,得到合并后数据;将所述合并后数据写入到所述数据块中。
2.根据权利要求1所述的方法,其特征在于,
所述获取待写入数据,将所述待写入数据划分为至少一个单元数据,并确定每个单元数据的索引信息,及每个单元数据在对象文件中的偏移位置,包括:
获取写请求,所述写请求包括待写入数据,所述待写入数据所属对象文件的文件信息,所述待写入数据在所述对象文件中的偏移位置;
根据所述待写入数据的偏移位置将所述待写入数据划分为至少一个单元数据,并确定每个单元数据在所述对象文件中的偏移位置;
根据单元数据的偏移位置确定该单元数据的编号;根据所述待写入数据的文件信息和该单元数据的编号确定该单元数据的索引信息。
3.根据权利要求2所述的方法,其特征在于,所述根据所述待写入数据的偏移位置将所述待写入数据划分为至少一个单元数据,包括:
基于预先配置的偏移区间和所述待写入数据的偏移位置,将所述待写入数据划分为至少一个单元数据;其中,同一单元数据的起始偏移位置和结束偏移位置位于同一偏移区间,不同单元数据的起始偏移位置位于不同偏移区间;偏移区间的长度为长度阈值,每个单元数据的长度均不大于该长度阈值。
4.根据权利要求1所述的方法,其特征在于,所述根据所述单元数据的偏移位置将所述单元数据写入到所述缓存块组绑定的内存块,包括:
根据所述单元数据的偏移位置确定所述单元数据所属的数据块;
判断所述缓存块组绑定的内存块中是否已存在所述数据块;
如果否,则在所述缓存块组绑定的内存块中创建所述单元数据所属的数据块,并将所述单元数据写入到已创建的所述数据块中;
如果是,则将所述单元数据更新到已存在的所述数据块中。
5.根据权利要求1所述的方法,其特征在于,所述缓存块组包括当前正在写入单元数据的第一缓存块和当前未写入单元数据的第二缓存块;
所述采用追加写方式将所述单元数据写入到所述缓存块组,包括:
采用追加写方式将所述单元数据写入到所述第一缓存块;
所述缓存块组中的单元数据满足迁移条件,包括:若第一缓存块被占用的存储空间达到空间阈值,则确定所述缓存块组中的单元数据满足迁移条件;
所述将所述缓存块组绑定的内存块中的单元数据迁移到数据区块之后,所述方法还包括:删除所述第一缓存块中的单元数据;
从所述缓存块组绑定的内存块中删除与所述第一缓存块对应的单元数据。
6.根据权利要求1所述的方法,其特征在于,
所述对所述单元数据和所述已存储数据进行合并,得到合并后数据,包括:
从所述已存储数据中确定出与所述单元数据匹配的子数据,并通过所述单元数据替换所述已存储数据中的所述子数据,得到所述合并后数据;
其中,所述子数据的偏移位置与所述单元数据的偏移位置相同。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视系统技术有限公司,未经杭州海康威视系统技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010979211.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





