[发明专利]一种基于散点的大数据存储方法在审
申请号: | 201911100116.1 | 申请日: | 2019-11-12 |
公开(公告)号: | CN110888934A | 公开(公告)日: | 2020-03-17 |
发明(设计)人: | 李华龙;张颖颖 | 申请(专利权)人: | 中核控制系统工程有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/28;G06F16/13;G06F16/22 |
代理公司: | 核工业专利中心 11007 | 代理人: | 张雅丁 |
地址: | 100176 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 数据 存储 方法 | ||
1.一种基于散点的大数据存储方法,其特征在于,包括以下步骤:
(1)对数据点信息进行分类定义
按照数据点的输入输出类型和数据用途,将数据点进行细分;
(2)实时信息存储
实时数据库在每台主机开辟大小相同的共享内存块区,同时,在该内存块区再按照数据点的输入输出类型进行分块存储;
输入输出类型的划分根据需要自定义为任何类型,每个数据点属于其中的一种类型;
按照输入输出类型划分,共享内存区也被划分为相应的区块,分别存储属于该类型的数据点;
(3)静态信息存储
在将数据导入到实时库后,生成索引文件和数据文件,通过这两个文件,将所有的数据导入到空的实时库中;
索引文件包含索引文件头部存储区域和索引文件节点存储区域;
索引文件头部存储内容包括第一个根节点索引、数据点总数以及最后一个节点的索引;
索引文件节点存储区域存储每个节点所包含的各个数据点点名。
数据文件根据索引文件中每个数据点的索引号,确定数据点在数据文件中的存储位置;
数据文件包含数据文件头部存储区域和数据文件节点存储区域;
数据文件头部存储区域内容包括最大索引号、根节点总数、每个根节点索引和最后一个根节点索引;
数据文件节点存储区域存储每个节点所包含的各个数据点静态属性信息。
2.如权利要求1所述的一种基于散点的大数据存储方法,其特征在于:步骤(1)中:将数据点细分为十四种,分别为:一层模拟量输入、一层模拟量输出、一层开关量输入、一层开关量输出、一层开关量输入输出、一层模拟量输入输出、二层模拟量输入、二层模拟量输出、二层开关量输入、二层开关量输出、二层开关量输入输出、二层模拟量输入输出、二层静态点、二层计算点。
3.如权利要求2所述的一种基于散点的大数据存储方法,其特征在于:步骤(1)中:二层静态点用途是作为字符串、静态辅助变量之一。
4.如权利要求2所述的一种基于散点的大数据存储方法,其特征在于:步骤(1)中:二层计算点用途是计算中间参数。
5.如权利要求1所述的一种基于散点的大数据存储方法,其特征在于:步骤(2)中:根据数据点导入顺序,确定每个数据点在其所属共享内存区的偏移量,存储该数据点的实时数据。
6.如权利要求1所述的一种基于散点的大数据存储方法,其特征在于:步骤(2)中:实时数据访问时,由该偏移量和共享内存区块的首地址之和,得到数据点的在内存区的存储位置,实现实时数据的快速读写。
7.如权利要求1所述的一种基于散点的大数据存储方法,其特征在于:步骤(3)中:静态信息指该数据点的属性信息,包括点名、所属系统、单位、描述、数据类型、维度、长度。
8.如权利要求1所述的一种基于散点的大数据存储方法,其特征在于:步骤(3)中:静态信息以文本形式存储,存储文件分为索引存储文件和数据文件。
9.如权利要求1所述的一种基于散点的大数据存储方法,其特征在于:步骤(3)中:索引存储文件采用平衡多路查找树B-tree数据结构。
10.如权利要求1所述的一种基于散点的大数据存储方法,其特征在于:步骤(1)中:将数据点细分为十四种,分别为:一层模拟量输入、一层模拟量输出、一层开关量输入、一层开关量输出、一层开关量输入输出、一层模拟量输入输出、二层模拟量输入、二层模拟量输出、二层开关量输入、二层开关量输出、二层开关量输入输出、二层模拟量输入输出、二层静态点、二层计算点;
步骤(1)中:二层静态点用途是作为字符串、静态辅助变量之一;
二层计算点用途是计算中间参数;
步骤(2)中:根据数据点导入顺序,确定每个数据点在其所属共享内存区的偏移量,存储该数据点的实时数据;
实时数据访问时,由该偏移量和共享内存区块的首地址之和,得到数据点的在内存区的存储位置,实现实时数据的快速读写;
步骤(3)中:静态信息指该数据点的属性信息,包括点名、所属系统、单位、描述、数据类型、维度、长度;
静态信息以文本形式存储,存储文件分为索引存储文件和数据文件;
步骤(3)中:索引存储文件采用平衡多路查找树B-tree数据结构。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中核控制系统工程有限公司,未经中核控制系统工程有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911100116.1/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置