[发明专利]一种测井数据动态高效存取方法有效
申请号: | 201811376626.7 | 申请日: | 2018-11-19 |
公开(公告)号: | CN109634957B | 公开(公告)日: | 2019-11-29 |
发明(设计)人: | 伍东;傅少庆;赵东;郭玉庆;樊春华;仵燕 | 申请(专利权)人: | 中国石油集团长城钻探工程有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23 |
代理公司: | 11228 北京汇泽知识产权代理有限公司 | 代理人: | 程殿军<国际申请>=<国际公布>=<进入 |
地址: | 100101 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据块 测井数据 删除 应用模块 存取 测井数据处理 测井技术 高效操作 解释软件 请求条件 曲线数据 数据增加 压缩 解压缩 数据量 数据体 合并 哈希 创建 数据库 筛选 传递 | ||
1.一种测井数据动态高效存取方法,其特征在于,包括如下步骤:
步骤1,将测井数据中的曲线数据按照指定数据个数进行拆分,拆分为多个数据块,再将数据块压缩后存入文件或数据库中,对压缩后的数据块计算哈希值并记录;其中,对一维曲线数据,按照索引顺序每隔指定数据个数将数据拆分为多个数据块;对二维曲线数据,按照先时间维,再深度维将数据由二维组合为一维数据,然后按照索引顺序每隔指定数据个数将数据拆分为多个数据块;对于三维曲线数据,按照先时间维、传感器维,再深度维将数据由三维组合为一维数据,最后按照索引顺序每隔指定数据个数将数据拆分为多个数据块;
步骤2,根据应用模块请求,根据深度索引范围,在文件或数据库中找到满足要求的一个或多个数据块,计算找到的数据块的哈希值,对比计算得到的哈希值和记录的哈希值,解压缩,组合成一个数据体,从中筛选出符合请求条件的数据,传递给应用模块;
步骤3,通过数据块大小动态切分与合并,实现数据增加、删除和修改的操作;
其中,所述步骤3,包括:
S31,在数据块中插入数据后,如果新生成的数据块中包含数据个数不超过规定个数,则保留;如果新生成的数据块中包含数据个数超出了设定的数据个数上限,则将新生成的数据块按照指定数据个数进行拆分,生成多个新的、较小的数据块;
S32,在数据块中删除数据后,如果新生成的数据块中包含数据个数不少于规定个数,则保留;如果新生成的数据块中包含数据个数少于设定的数据个数下限,则将本数据块与上一个数据块合并;
S33,在数据块中修改数据后,保留新生成的数据块;
S34,对新生成的数据块进行压缩,存入文件或数据库中,计算哈希值,同时更新文件或数据库中相应结构中的数据块名字或ID,数据索引范围和数据个数;
S35,将读取的原始数据块从文件或数据库中删除。
2.如权利要求1所述的测井数据动态高效存取方法,其特征在于,所述步骤1包含:
S11,将测井数据拆分为多个数据块:对一维曲线数据,按照索引顺序每隔指定数据个数将数据拆分为多个数据块;对二维曲线数据,按照先时间维,再深度维将数据由二维组合为一维数据,然后按照索引顺序每隔指定数据个数将数据拆分为多个数据块;对于三维曲线数据,按照先时间维,传感器维,再深度维将数据由三维组合为一维数据,最后按照索引顺序每隔指定数据个数将数据拆分为多个数据块;对拆分所形成的多个数据块进行命名或者取ID;将拆分所形成的多个数据块暂存在内存中;
S12,对拆分后得到数据块进行压缩处理;
S13,将压缩后的数据块存入文件或数据库中;
S14,对压缩后的数据块计算哈希值;
S15,更新文件或数据库相关表格信息:在文件或数据库的相应结构体中记录一条曲线总共拆分的数据块的个数,每个数据块的名字或ID,每个数据块所包含的数据索引范围,每个数据块存储的位置信息,以及每个数据块的哈希值。
3.如权利要求1所述的测井数据动态高效存取方法,其特征在于,所述步骤2包含:
S21,应用模块请求读取某一条件数据;
S22,根据深度索引范围,在文件或数据库中找到满足要求的一个或多个数据块;
S23,将找到的一个或多个数据块,读取到内存中,计算找到的数据块的哈希值;
S24,将找到的数据块的哈希值,与保存在文件或数据库中的该数据块相应的哈希值进行比较,如果一致,则继续后续步骤,否则退出;
S25,使用解压缩算法将找到的一个或多个数据块解压缩,获得原始数据,保存在内存中;
S26,根据文件或数据库中所保存的上述一个或多个数据块在索引上的关系,将解压后的数据组合成一个数据体;
S27,将所述组合的数据体中符合请求条件的数据传递给应用模块。
4.如权利要求1所述的测井数据动态高效存取方法,其特征在于,步骤1中,所述指定数据个数由用户指定,形成的数据块大小由用户指定。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国石油集团长城钻探工程有限公司,未经中国石油集团长城钻探工程有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811376626.7/1.html,转载请声明来源钻瓜专利网。