[发明专利]一种油气生产实时数据存储系统及数据读取方法

说明书

本发明提供了一种油气生产实时数据存储系统及数据读取方法，包括一种油气生产实时数据存储系统，该系统包括实时数据存储单元，该实时数据存储单元包括写接口和读接口，所述写接口分别连接设置在实时数据存储单元内的指标数据缓存单元，文件系统读写单元，该文件系统读写单元连接设置在实时数据存储单元内的多个线程读缓冲，所述读接口与末端指标数据缓存单元连接。以及利用上述系统的数据读取方法，所述方法包括监控文件系统读写单元中数据的状态以及通过读接口进行读取操作；基于所述操监控，检测文件系统读写单元中的文件读写条件，该条件为进行读取文件系统读写单元中数据索引的需求。

技术领域

本发明涉及油气生产实时数据读写技术，尤其是一种油气生产实时数据存储系统及数据读取方法。

背景技术

落实国家工业化和信息化深度融合战略部署，近年来石油生产企业逐步加大了采油生产现场信息提升建设工作，利用传感器、物联网等技术，将传统的采油生产与信息自动化技术深度融合，实现了采油生产过程中油水井压力、温度、流量、电参数等数据的实时采集，使远程监控油水井生产状态、实现生产现场无人值守成为可能，提高了传统行业的劳动生产率。为进一步开发利用分钟级的海量生产数据，发挥数据资源的作用，为优化采油生产管理措施方案提供支持，需要对实时生产数据进行提取，结合采油工程理论，编制计算机软件，按照一定的模型对进行数据的变化趋势和变化数据进行计算、分析，预测生产异常情况，为超前采取管理措施提供指导。 目前普遍的做法是：

（1）将实时数据从专业的实时数据库中转存到Oracle等关系数据库中，在Oracle上进行查询提取数据到应用程序进行分析，作为通用型数据存储的Oracle等关系数据库受限于其通用性，采用B树/B+树/B-树等索引算法对海量的实时数据的查询分析力不从心，索引遍历随数据量的快速增长呈现迅速下降趋势。

（2）将实时数据从专业的实时数据库中转存到NoSQL库，在NoSQL库上进行查询分析，该做法性能略好与Oracle，但同样因为NoSQL的通用型设计对海量实时数据的存取性能提升有限。

（3）直接在专业的实时数据库上进行查询分析，专业的实时库一般部署在工控网环境，一般禁止在上面直接做开发，直接在专业的实时库上做分析会加大对该数据库的压力，将影响工控网的稳定性。

现有技术的数据库索引算法，需要进行遍历索引，才能将需要的数据加载到应用系统中，对于海量的实时数据，提取效率低，耗费时间长，难以满足海量数据提取、分析应用需求。

发明内容

有鉴于此，本发明的主要目的是提供一种油气生产实时数据存储系统及数据读取方法。

其采用的技术方案是：

一种油气生产实时数据存储系统，其特征在于，包括

一实时数据存储单元，该实时数据存储单元包括写接口和读接口，所述写接口分别连接设置在实时数据存储单元内相互连接的第一指标数据缓存单元、第N指标数据缓存单元以及末端指标数据缓存单元和一个线程写缓冲单元，其中N为正数且≥2；

一文件系统读写单元，该文件系统读写单元连接设置在实时数据存储单元内的多个线程读缓冲，其中至少一个线程读缓冲连接至第一指标数据缓存单元、第N指标数据缓存单元以及末端指标数据缓存单元中的任意一个，所述线程写缓冲单元分别连接至文件系统读写单元和至少一个指标数据缓存单元，

所述读接口与末端指标数据缓存单元连接。

一种利用油气生产实时数据存储系统的数据读取方法，所述方法包括

监控文件系统读写单元中数据的状态以及通过读接口进行读取操作；

基于所述操监控，检测文件系统读写单元中的文件读写条件，该条件为进行读取文件系统读写单元中数据索引的需求，以及