[发明专利]一种数据存储、访问方法、装置、服务器及存储介质

说明书

本发明实施例公开了一种数据存储、访问方法、装置、服务器及存储介质。该数据存储方法，包括：获取原始数据；其中，原始数据包括至少一条记录，各所述记录包括至少一个字段；确定原始数据的各字段的有效字段值的覆盖比，并将覆盖比小于设定阈值的字段确定为独立存储字段；将各记录在独立存储字段中的有效字段值独立存储，得到独立存储文件，并将各记录在除独立存储字段以外的各其他字段对应的字段值进行存储，得到集中存储文件。本发明实施例的技术方案减少了集中存储文件中有效字段值以外的默认值的添加比例，并通过减少默认值的数量，减少了对原始数据存储时的存储空间的占用，同时避免了在原始数据传输过程中的网络带宽的浪费。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种数据存储、访问方法、装置、服务器及存储介质。

背景技术

随着互联网技术的发展，网络中数据量不断增多，相应的存储和访问的数据量也不断增加。

现有技术中对数据进行存储时，通常对待存储数据所包含的所有记录采用统一的相同数据结构加以存储，这个数据结构中包含整个记录集的所有字段值，在某个或某些记录在某个或某些字段无值时，对该记录该字段存储位置必须填充无实际意义的默认值。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：在进行数据存储时，大量填充无实际意义的默认值，将造成数据存储的冗余，造成了存储空间的浪费，以及数据传输过程中网络带宽的浪费。

发明内容

本发明提供一种数据存储、访问方法、装置、服务器及存储介质，以减少数据存储时存储空间的占用，避免数据传输过程中网络带宽的浪费。

第一方面，本发明实施例提供了一种数据存储方法，包括：

获取原始数据；其中，所述原始数据包括至少一条记录，各所述记录包括至少一个字段；

确定所述原始数据的各字段的有效字段值的覆盖比，并将覆盖比小于设定阈值的字段确定为独立存储字段；

将各所述记录在所述独立存储字段中的有效字段值独立存储，得到独立存储文件，并将各所述记录在除所述独立存储字段以外的各其他字段对应的字段值进行存储，得到集中存储文件。

第二方面，本发明实施例还提供了一种数据访问方法，包括：

获取原始数据对应的独立存储文件和集中存储文件；其中，所述独立存储文件存储有所述原始数据包含的至少一个记录在独立存储字段的有效字段值；所述集中存储文件存储有所述原始数据包含的至少一个记录在除所述独立存储字段以外的其他字段的字段值；所述独立存储字段中有效字段值的覆盖比小于设定阈值；

分别将所述集中存储文件和所述独立存储文件中所包含的内容加载至内存；

接收数据访问指令，并根据所述数据访问指令对所述集中存储文件和/或所述独立存储文件的加载内容执行数据访问操作。

第三方面，本发明实施例还提供了一种数据存储装置，包括：

数据获取模块，用于获取原始数据；其中，所述原始数据包括至少一条记录，各所述记录包括至少一个字段；

字段确定模块，用于确定所述原始数据的各字段的有效字段值的覆盖比，并将覆盖比小于设定阈值的字段确定为独立存储字段；

存储模块，用于将各所述记录在所述独立存储字段中的有效字段值独立存储，得到独立存储文件，并将各所述记录在除所述独立存储字段以外的各其他字段对应的字段值进行存储，得到集中存储文件。

第四方面，本发明实施例还提供了一种数据访问装置，包括：