[发明专利]航班运行数据报文解析系统及方法

权利要求书

1.航班运行数据报文解析系统，其特征在于：包括报文采集模块(1)、报文解析模块(2)、报文预处理匹配模块(3)和报文数据监控管理模块(4)，其中：

所述报文采集模块(1)用于对报文数据的采集分类与存储，并将分类后的报文数据和采集识别成功消息传输至所述报文解析模块(2)，发送报文采集识别成功与否的消息给报文数据监控管理模块(4)；

所述报文解析模块(2)用于报文数据的解析，并将解析到的数据和解析成功消息发送至所述报文预处理匹配模块(3)，发送解析成功与否的消息至报文数据监控管理模块(4)；

所述报文预处理匹配模块(3)根据航班计划中的信息和解析到的数据进行验证、匹配运算，得到最佳的航班并将匹配结果消息发送至所述报文数据监控管理模块(4)；

所述报文数据监控管理模块(4)根据报文采集识别成功与否的消息、解析成功与否的消息和匹配结果消息进行数据统计和标记，根据报文数据生成全文索引，实现对报文数据全文检索；

所述报文采集模块(1)采用集群进行部署，通过分布式锁机制zookeeper协调多个采集节点对数据源进行报文数据采集分类，并将分类后的数据进行储存；最后发送含有报文数据结构的采集识别成功消息至所述报文解析模块(2)；最终将报文采集识别是否成功、采集识别开始时间、采集识别结束时间信息作为报文采集识别成功与否的消息发送至所述报文数据监控管理模块(4)；

所述报文解析模块(2)上设置有规则引擎QLExpress和MongoDB数据库；所述报文解析模块(2)在系统启动时加载报文解析规则并定时更新或者手动触发加载更新解析规则，当收到采集识别成功消息时，根据报文解析规则和规则引擎QLExpress解析出分类后的报文数据的键值对，将解析成功生成的键值对和采集识别成功消息组合成的JSON格式数据存入报文类别集合的MongoDB数据库中，同时JSON数据作为解析成功消息发送给报文预处理匹配模块(3)；最后对收到的采集识别成功消息追加报文解析开始时间、解析结束时间，作为解析成功与否的消息发送至所述报文数据监控管理模块(4)；

当所述报文预处理匹配模块(3)接收到解析成功消息时，读取消息中的解析结果，其中包含的航班起飞降落地址、航班号、承运人及报文生成时间推算航班日期，航班起飞降落时间数值类根据需要采用范围匹配，匹配航班计划中的航班信息，并根据航班中的信息和解析到的数据算出最佳的航班；最后在解析成功消息追加匹配开始时间、匹配结束时间和航班ID，作为匹配结果消息发送至所述报文数据监控管理模块(4)。

2.航班运行数据报文解析方法，其特征在于，包括以下步骤：

S1：报文采集模块(1)采集报文数据并进行分类与存储，并将分类后的报文数据和采集识别成功消息传输至所述报文解析模块(2)，将采集识别成功与否消息传输至所述报文数据监控管理模块(4)；

S2：报文解析模块(2)对报文数据进行解析及结果存储，并将解析到的数据和解析成功消息发送至报文预处理匹配模块(3)，发送解析成功与否消息至报文数据监控管理模块(4)；

S3：报文预处理匹配模块(3)根据航班中的信息和解析到的数据进行匹配运算，得到最佳的航班并将匹配结果消息发送至报文数据监控管理模块(4)；

S4：报文数据监控管理模块(4)根据报文采集识别成功与否的消息、解析成功与否的消息和匹配结果消息进行数据统计和标记，根据报文数据生成全文索引，实现对报文数据全文检索；

在所述步骤S1中，报文采集模块(1)采用集群进行部署，通过分布式锁机制zookeeper协调多个采集节点对数据源进行报文数据采集分类，并将分类后的数据进行储存；最后发送含有报文数据结构，如果是大报文，为包含报文存储地址数据结构的采集识别成功通知消息至报文解析模块(2)；最终将报文采集识别是否成功、采集识别开始时间、采集识别结束时间信息作为报文采集识别成功与否的消息发送至所述报文数据监控管理模块(4)；

在所述步骤S2中，报文解析模块(2)在系统启动时加载报文解析规则并定时更新或者手动触发加载解析规则，当收到采集识别成功消息时，根据报文解析规则和设置在报文解析模块(2)上的规则引擎QLExpress解析出分类后的报文数据的键值对，并将生成的键值对数据以及其他相关数据组合生成的JSON格式数据，一并存入设置在报文解析模块(2)上用于存储报文类别集合的MongoDB数据库中，同时JSON数据作为解析成功消息发送给报文预处理匹配模块(3)；最后对收到的采集识别成功消息追加报文解析开始时间、解析结束时间，作为解析成功与否的消息发送至所述报文数据监控管理模块(4)；

在所述步骤S3中，当报文预处理匹配模块(3)接收到解析成功消息时，如果消息中包含解析结果地址，则读取MongoDB数据库中的JSON文件，否则读取消息中解析结果JSON，根据JSON数据中包含的航班起飞降落地址、航班号、承运人及报文生成时间推算航班日期，航班起飞降落时间数值类根据需要采用范围匹配，匹配航班计划中的航班信息，并根据航班中的信息和解析到的数据算出最佳的航班；最后在解析成功消息追加匹配开始时间、匹配结束时间和航班ID，作为匹配结果消息发送至报文数据监控管理模块(4)。