[发明专利]一种航班地面保障作业规范流程检测系统

权利要求书

1.一种航班地面保障作业规范流程检测系统，其特征在于：包括视频获取模块、深度学习检测模块和数据分析模块；

视频获取模块获取机场停机坪的监控视频，视频来自停机坪三个不同位置的相机，其中两个相机分别固定在飞机的右侧和左前方，另一个可旋转相机安装在飞机前方；拍摄的视频保存在机场本地数据中心，开放API供其他模块调取；

深度学习检测模块预先使用标注数据训练目标检测模型并保存，使用检测工具复检保证数据标注的可靠性，在darknet框架下构建目标检测深度学习模型，使用标注数据进行训练，保存训练好的模型参数；从视频获取模块提供的API接口调取监控视频，经目标检测模型逐帧检测后，将检测结果通过API传递给数据分析模块；

数据分析模块从API获取视频图像帧检测结果，对检测结果进行数据预处理，使用状态机模型分析视频中的流程进行状态并可视化显示，对不符合地面保障作业规范流程的异常状态发出警告信息，并将关键事件的时间段导出到ACDM数据库。

2.根据权利要求1所述的一种航班地面保障作业规范流程检测系统，其特征在于：视频获取模块中采集到的视频按照不同视角分类存储，视频分辨率为1080P。

3.根据权利要求1所述的一种航班地面保障作业规范流程检测系统，其特征在于：深度学习检测模块中，使用目标检测标注工具对提取出的图像帧进行数据标注，标注目标包括飞机、人、警示锥、轮档、客梯车、装卸货车、配餐车、加油车、清/污水车、客舱门供10种地面保障流程对象；目标的位置信息采用矩形边界框表示，每个矩形边界框用左上角坐标和右下角坐标定义。

4.根据权利要求1所述的一种航班地面保障作业规范流程检测系统，其特征在于：数据分析模块对从深度学习检测模块API获取的检测结果进行数据预处理，联合物体的当前位置信息、运动信息、环境信息对当前的流程状态进行判断；深度学习检测模块API提供物体的当前位置信息，采用KCF跟踪算法获取物体的运动信息，采用传统机器视觉方法获取物体的环境信息。

5.根据权利要求4所述的一种航班地面保障作业规范流程检测系统，其特征在于：状态机模型可根据数据预处理获取的信息推断得到物体的下一个状态，并综合判断物体的位置和运动是否符合流程规范。

6.根据权利要求5所述的一种航班地面保障作业规范流程检测系统，其特征在于：针对物体的当前位置信息、运动信息和环境信息，状态机模型可以分析得到关键事件的时间点。