[发明专利]一种基于python和mysql解析LCU系统日志数据方法及装置

说明书

本发明提出了一种基于python和mysql解析LCU系统日志数据方法及装置，包括：导入报文类型模板，将导入成功的报文类型模板添加到mysql数据库中形成模板表；将日志文件导入mysql数据库中，将日志文件拆分成多个报文，基于python脚本将字段数据存储到交互展示列表中；在交互展示列表中选择需要解析的报文，将选中的报文与模板表中的报文类型模型进行匹配；基于匹配到的报文类型模板对报文中的各个字段数据进行解析，通过python脚本将解析结果处理为可视化列表。本发明只需要将日志导入系统，测试人员再根据需要选择要解析的十六进制数据，即可得到解析后的数据，大幅度提升测试人员的测试效率，方便测试人员分析数据。

技术领域

本发明属于数据解析技术领域，尤其涉及一种基于python和mysql解析LCU系统日志数据方法及装置。

背景技术

目前轨道交通行业部分地铁列车采用车载逻辑控制单元(Logic Control Unit，LCU)实现列车电气控制，具有编程方便、控制方式灵活等特点。LCU系统在通信时大多使用二进制和十六进制数据传输方式，其运行时产生的日志报文大多采用十六进制数据存储，十六进制存储方式既可以使用有限的数字符号代表多种不同的设备状态及通信参数值，又能够灵活转换为二进制和八进制数据，同时还能缩减数据存储占用的内存空间，提高运行效率。

但十六进制数据可读性差，对人员专业性要求较高，非专业人员无法浅显易懂的通读数据，影响工作效率，增加工作难度。测试人员和设备维护人员查看设备运行数据和设备状态时需根据相应的数据类型和数据接口协议文档逐位对应解析日志内容，且每产生新的日志文件都需要重新解析相应报文才能提取到最新的数据值，若日志文件数据较多时寻找相关数据则非常耗费时间。

发明内容

为了解决现有技术中存在的LCU系统的日志报文中十六进制数据晦涩难懂、解析效率低、人工耗费时间长的缺点和不足，本发明提出了一种基于python和mysql解析LCU系统日志数据方法，用于解析地铁列车的LCU系统中日志报文的十六进制数据，主要利用python和mysql技术实现，MySQL用于存储导入的日志模板和导入日志时自动生成日志临时表存储当前导入的日志数据，再通过日志临时表和模板表进行多表查询匹配能够在前台正确展示报文类型、字段名称、字段值等数据供用户筛选和分析。Python主要用于给用户提供界面展示数据和人机交互等，用户根据界面进行导入、查询等数据操作，以及实现对不同界面之间相关的跳转、连接mysql、数据处理、数据展示、页面内部相关逻辑控制等操作。

本发明提出的基于python和mysql解析LCU系统日志数据的方法包括：

导入报文类型模板，将导入成功的报文类型模板添加到mysql数据库中形成模板表；

将日志文件导入mysql数据库中，将日志文件拆分成多个报文，基于python脚本将字段数据存储到交互展示列表中；

在交互展示列表中选择需要解析的报文，将选中的报文与模板表中的报文类型模型进行匹配；基于匹配到的报文类型模板对报文中的各个字段数据进行解析，通过python脚本将解析结果处理为可视化列表。

可选的，所述报文类型模板为excel模板表，所述excel模板表基于LCU系统的接口协议，定义了包括模板id、报文类型、字段名称、数据长度以及若干个异常数据的字段位置以及对应的字段含义。

可选的，所述将选中的报文与模板表中的报文类型模型进行匹配，包括：根据所述报文的报文头确定报文类型，将对应相同报文类型的报文类型模板与所述报文匹配。

可选的，所述基于匹配到的报文类型模板对报文中的各个字段数据进行解析，通过python脚本将解析结果处理为可视化列表，包括：

将报文类型模板定义的字段含义按照字段位置的顺序构成可视化列表的表头；

根据报文类型模板定义的数据长度，将报文解析拆分为多个字段数据，将拆分出的字段数据添加到对应字段位置的表头上，得到可视化列表。