[发明专利]一种数据存储、访问方法、装置、服务器及存储介质在审
| 申请号: | 201910701341.4 | 申请日: | 2019-07-31 |
| 公开(公告)号: | CN111752941A | 公开(公告)日: | 2020-10-09 |
| 发明(设计)人: | 唐智灵 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
| 主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/958 |
| 代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
| 地址: | 100086 *** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 数据 存储 访问 方法 装置 服务器 介质 | ||
1.一种数据存储方法,其特征在于,包括:
获取原始数据;其中,所述原始数据包括至少一条记录,各所述记录包括至少一个字段;
确定所述原始数据的各字段的有效字段值的覆盖比,并将覆盖比小于设定阈值的字段确定为独立存储字段;
将各所述记录在所述独立存储字段中的有效字段值独立存储,得到独立存储文件,并将各所述记录在除所述独立存储字段以外的各其他字段对应的字段值进行存储,得到集中存储文件。
2.根据权利要求1所述的方法,其特征在于,在得到集中存储文件之后,还包括:
根据所述原始数据的各记录在所述集中存储文件中的存储顺序,生成与各记录的记录标识相对应的索引标识,以用于在接收到数据访问指令时根据待访问记录的记录标识所对应的索引标识,在所述集中存储文件中查找待访问记录。
3.根据权利要求1所述的方法,其特征在于,在将至少一个字段确定为独立存储字段之后,还包括:
在所述原始数据对应的索引字段配置文件中,对各所述独立存储字段进行标记,以用于在接收到数据访问指令时根据所述标记确定待访问字段是否存储于独立存储文件中。
4.根据权利要求1-3任一项所述的方法,其特征在于,确定所述原始数据的各字段的有效字段值的覆盖比,包括:
确定各字段的有效字段值的数量;
根据所述有效字段值的数量和所述原始数据包含的各记录的数量的比值,分别确定各字段的覆盖比。
5.根据权利要求4所述的方法,其特征在于,确定各字段的有效字段值的数量,包括:
对所述原始数据进行排序,并根据排序结果确定各字段对应的有效字段值的数量。
6.一种数据访问方法,其特征在于,包括:
获取原始数据对应的独立存储文件和集中存储文件;其中,所述独立存储文件存储有所述原始数据包含的至少一个记录在独立存储字段的有效字段值;所述集中存储文件存储有所述原始数据包含的至少一个记录在除所述独立存储字段以外的其他字段的字段值;所述独立存储字段中有效字段值的覆盖比小于设定阈值;
分别将所述集中存储文件和所述独立存储文件中所包含的内容加载至内存;
接收数据访问指令,并根据所述数据访问指令对所述集中存储文件和/或所述独立存储文件的加载内容执行数据访问操作。
7.根据权利要求6所述的方法,其特征在于,在将所述独立存储文件中所包含的内容加载至内存中,包括:
将所述独立存储文件中的内容读入内存中,并将所读入的内容的记录标识和各记录标识在所述独立存储字段中的有效字段值,写入与所述独立存储文件对应的字典;
相应的,根据所述数据访问指令对所述独立存储文件的加载内容执行数据访问操作,包括:
根据所述数据访问指令对所述独立存储文件对应的所述字典执行数据访问操作。
8.根据权利要求7所述的方法,其特征在于,根据所述数据访问指令对所述独立存储文件对应的所述字典执行数据访问操作,包括:
根据所述数据访问指令包含的待访问字段,确定待查询字典;
根据所述数据访问指令确定待访问记录的记录标识,并根据所述待访问记录的记录标识,在所述待查询字典中查找与所述待访问字段对应的有效字段值;
对所述待访问字段对应的有效字段值执行相应的数据访问操作。
9.根据权利要求6所述的方法,其特征在于,根据所述数据访问指令对集中存储文件的加载内容执行数据访问操作,包括:
根据所述数据访问指令确定待查询记录标识对应的索引标识;其中,所述索引标识根据所述原始数据中对应记录在所述集中存储文件中的存储顺序生成;
根据所述索引标识和所述数据访问指令包含的待访问字段,查找所述集中存储文件的加载内容中的字段值,并对查找到的字段值执行相应的数据访问操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910701341.4/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置





