[发明专利]一种AIS数据处理方法及系统

权利要求书

1.一种AIS数据处理方法，其特征在于，包括：

采集AIS数据，并将采集的所有AIS数据写入到消息队列，形成AIS数据消息；其中，所述AIS数据包括AIS转发数据、AIS实时数据、AIS历史数据；

对所述AIS数据消息进行分析，判断AIS数据消息中的数据是否存在异常，并在判断结果为AIS数据消息中的数据存在异常的情况下，对AIS数据消息中的数据进行异常去除处理；

对异常去除处理后的AIS数据消息进行解码，并根据预置匹配规则对解码后得到的AIS数据进行匹配，形成AIS基础数据、AIS位置数据、AIS数据历史数据；

根据得到的AIS基础数据、AIS位置数据、AIS数据历史数据，通过预置的数据挖掘框架，建立AIS数据计算基础模型；

将AIS基础数据、AIS位置数据、AIS数据历史数据以及AIS数据计算基础模型通过索引分布式文件存储形式存在至数据库，形成结构化AIS数据库。

2.根据权利要求1所述的AIS数据处理方法，其特征在于，还包括：

在采集的所有AIS数据写入到消息队列之前，对采集的所有AIS数据进行数据格式处理，促使所有AIS数据的格式为预置数据格式，并备份所有AIS数据；

在对所有的AIS数据进行数据格式处理之后，对AIS实时数据进行时间戳判断；

并在判断结果为AIS实时数据不具备时间戳的情况下，在AIS实时数据中写入时间戳。

3.根据权利要求1所述的AIS数据处理方法，其特征在于，对所述AIS数据消息进行分析，判断AIS数据消息中的数据是否存在异常，并在判断结果为AIS数据消息中的数据存在异常的情况下，对AIS数据消息中的数据进行异常去除处理包括：

对AIS数据消息中的数据，进行报文规则分析，判断AIS数据消息中的数据报文规则是否正确，并在判断结果为错误的情况下，删除对应的数据，其中，所述报文规则包括报文长度规则、报文项目规则、报文内容格式规则；

对AIS数据消息中的数据，进行数据时隙分析，判断AIS数据消息中的每个数据是否为单条报文数据；并在判断结果为否的情况下，继续对该数据进行分析，确定该数据是否为数据时隙中的第一条报文数据，若是，则创建数据等待队列，若不是，则将该数据追加到数据等到队列，并在数据等到队列中所有时隙数据全部完成后，根据数据时隙对数据进行融合，形成完整的单条报文数据；

对AIS数据消息中的数据，进行数据重复分析，判断AIS数据消息中的数据是否存在重复数据；并在判断结果为是的情况下，对重复的数据进行删除处理。

4.据权利要求3所述的AIS数据处理方法，其特征在于，对AIS数据消息中的数据，进行数据重复分析，判断AIS数据消息中的数据是否存在重复数据包括：

将AIS数据消息中的数据存储至预置内存数据表；并在单位时间内，从预置内存数据表中取出对应数据；

将对AIS数据消息中的后续数据存储至所述内存数据表，并将后续数据与内存数据表中所记录的数据进行比对，在比对结果为具有相同数据的情况下，判断该数据为重复数据。

5.根据权利要求1所述的AIS数据处理方法，其特征在于，根据预置匹配规则对解码后得到的AIS数据进行匹配，形成AIS基础数据、AIS位置数据、AIS数据历史数据包括：

通过远程字典匹配规则，将解码后得到的AIS数据根据静态船舶数据、船舶位置信息数据以及船舶历史数据，匹配分类为AIS基础数据、AIS位置数据、AIS数据历史数据；

并对匹配分后的AIS基础数据、AIS位置数据、AIS数据历史数据，单独采用远程字典匹配规则进行内部重复数据匹配，并对应的重复数据进行去重处理。