[发明专利]格点数据的处理方法及其相关设备

说明书

本公开提供了一种格点数据的处理方法，包括：根据预先设定的格点数据对象结构，在数据库中创建一张数据库表；其中，所述数据库表包括：格点数据字段以及至少一个属性字段；从数据集中读取待处理的多组格点数据及每一组格点数据对应的至少一项属性信息；针对每一组格点数据，按照预先设定的格点数据对象结构将所述格点数据封装为格点数据对象；以及针对每一组格点数据，将所述格点数据对象写入所述数据库表一条数据记录的格点数据字段，以及将所述至少一项属性信息分别写入所述数据记录中与其对应的属性字段。对应上述格点数据的处理方法，本公开还提供了格点数据的处理装置、电子设备以及计算机可读存储介质。

技术领域

本公开的一个或多个实施例涉及数据的处理技术，尤其涉及一种格点数据的处理方法、格点数据的处理装置、电子设备及计算机可读存储介质。

背景技术

随着气象观测资料种类的增多、观测频次的增多，导致气象数据量越来越大。气象数据是一类典型的大数据，具有数据量大、时效性高、数据种类丰富等特点。目前，很多气象数据是以格点数据的形式进行存储的，又称为气象格点数据，例如，某一地区的降水量数据或气温数据等等。气象格点数据通常是将空间按照经纬度分割成多个网格，每一个网格称为一个格点，每一个格点所代表的实体的位置由它的行列号定义，此外，还要为各格点赋予相应的值来表示该格点所代表的实体的数值。简单来讲，可以将格点数据简单看成一个二维矩阵，每个格点对应矩阵中的一个位置和一个值，这部分数据可以称为格点数据的数据部分。除了上述数据部分之外，上述格点数据还包括对上述数据部分进行描述的描述信息。例如，描述数据部分行数和列数、行和列的分辨率以及起始行和列对应的经纬度等等信息的描述信息。此外，上述格点数据中的每个格点还可以对应一个或多个描述格点数据属性的源数据。上述源数据可以包括一项或者多项格点数据的属性信息。例如，这些属性信息可以包括：格点数据对应的时间信息、高度信息或采样值等除了地理空间之外的其他维度的信息。通常情况下，气象格点数据可以包括多个格点数据文件，每个气象格点数据文件存储一类气象数据，且每个气象格点数据中的各个格点对应同一个或多个属性信息。例如，可以将某一天某一区域内的降水量存储在一个格点数据文件中，则该格点数据文件中的每个格点的行号对应一个纬度值，每个格点的列号对应一个经度值，因此，每个格点所代表的实体位置则可以由该格点的行列所对应的经纬度确定。而且，每个格点的值为该天该位置的降水量。可以看出，该降水量格点数据记录了某一天某区域内各个由不同经纬度确定的地理位置的降水量。又例如，可以将某一天某一区域内的平均日温存储在另一个格点数据文件中，每个格点的行号对应一个纬度值，每个格点的列号对应一个经度值，因此，每个格点所代表的实体位置则可以由该格点的行列所对应的经纬度确定。而且，每个格点的值为该天该位置的平均日温。可以看出，该日温格点数据记录了该天某区域内各个由不同经纬度确定的地理位置的平均日温。当然，需要说明的是，一个格点数据文件中的各个格点也可以对应不同的时间信息。

目前，通常是采用关系型数据库加文件系统的方式来实现气象格点数据的存储和实时查询。然而，这种关系型数据库加文件系统的方式往往难以承受大数据量的文件数量增长，且文件目录的树形结构不能很好地满足对数据进行按序访问的特点，而且由于在对气象格点数据进行查询或分析处理时，文件系统需要首先从关系型数据库中下载全部气象格点数据然后才能对其进行分析处理，导致所需的处理时间非常长。因此，这种模式无法很好地满足气象格点数据的处理需求。

发明内容

有鉴于此，本公开一个或多个实施例提出一种格点数据的处理方法。基于本公开的格点数据方法，可以实现格点数据的快速实时查询以及实时运算。

本公开一个或多个实施例所述的格点数据的处理方法，可以包括：根据预先设定的格点数据对象结构，在数据库中创建一张数据库表；其中，所述数据库表包括：格点数据字段以及至少一个属性字段；从数据集中读取待处理的多组格点数据及每一组格点数据对应的至少一项属性信息；针对每一组格点数据，按照预先设定的格点数据对象结构将所述格点数据封装为格点数据对象；以及针对每一组格点数据，将所述格点数据对象写入所述数据库表一条数据记录的格点数据字段，以及将所述至少一项属性信息分别写入所述数据记录中与其对应的属性字段。