[发明专利]一种基于视觉的矿质混合料成分实时检测方法

权利要求书

1.一种基于视觉的矿质混合料成分实时检测方法，以水泥生产线生料(石灰石、黄土、铁铝校正料混合)配比检测方法的为例，其特征在于，包括如下步骤：

步骤一，选择IP摄像机并安装：选择带有自动补偿光源功能的全彩夜视摄像机，摄像机图像质量满足分析要求，并将摄像机安装在每种矿物混合料成分的下料设备上方，IP摄像头通过厂家配套的视频后台软件将视频流转成MP4；

步骤二，获取不同物料构成的成像视频：在光线不同的时间段，控制每种矿质混合料成分的下料设备开关，记录时段，并从IP摄像头视频后台软件连续两周内不同时段各采集5分钟时长的视频数据，获取产线上的“传送带空载视频”、“装载石灰石运行视频”、“装载石灰石与黄土混合料运行视频”以及“装载完整混合生料运行视频”；

步骤三，生成目标检测数据集：使用OpenCV图像处理库，根据产线运行速度，在视频里提取图片序列；

步骤四，目标检测集分析计算：使用深度学习网络对一个标准的连续载料传输视频进行多点分析，在一个投料周期内，基于通用机器学习框架，对图片数据进行深度学习网络训练学习，计算出每种混合物料片段的比例；

步骤五，统计投放结果；

步骤六，设定误差允许范围：根据过程控制工程师的实际经验，设定物料成分实际允许的误差范围，统计监测点的检测结果，并将结果上报给生产运维检修系统，当物料配比超限时间超过阈值时，及时主动提示产线工人配料异常，使现场人员及时得知配料异常并跟踪异常原因。

2.如权利要求1所述的一种基于视觉的矿质混合料成分实时检测方法，其特征在于，所述步骤二中提取图片的时间间隔控制为两两图片内容刚好不重合，图像序列提取间隔的公式为：

式中：J_tp为图像序列的提取间隔，L为视场内传送带的物理长度，V为传送带的运行速度，FR为视频的帧率。

3.如权利要求1所述的一种基于视觉的矿质混合料成分实时检测方法，其特征在于，所述步骤四中目标检测集分析计算的具体过程如下：

对“石灰石”监测点，以空带运行数据作负样本，在通用机器学习框架Pytorch下，使用深度学习网络MobileNetV2训练二分类模型，将图片裁切整理为256×256像素的尺寸，使用随机梯度下降方法和0.0001的学习率形成测试集图像预测模型，使用该模型预测测试集图像序列，判断哪张图片在对应的时间节点石灰石未正常投放；

对“石灰石+黄土”监测点，以石灰石传送带数据作为负样本，使用深度学习网络MobileNetV2训练二分类模型，将图片裁切整理为256×256像素的尺寸，使用随机梯度下降方法和0.0001的学习率形成测试集图像预测模型，使用该模型预测测试集图像序列，判断哪张图片在对应的时间节点黄土未正常投放；

对“石灰石+黄土+校正料”监测点，校正料间断投放，标注出校正料在图上的位置框，并将位置框内区域作为检测数据集，使用深度学习网络YoloV5训练目标检测模型，将图片裁切整理为640×640像素的尺寸，使用随机梯度下降方法和0.0001的学习率形成测试集图像预测模型，使用该模型预测测试集图像序列，判断哪张图片在对应的时间节点投放了校正料，将校正料检出框在传送带载物区域的占比作为校正料投放量的估算值。

4.如权利要求1所述的一种基于视觉的矿质混合料成分实时检测方法，其特征在于，所述步骤一中的光线不同的情况为早晨8点、正午12点、傍晚6点以及深夜12点。

5.如权利要求1所述的一种基于视觉的矿质混合料成分实时检测方法，其特征在于，所述步骤一中摄像机的像素大于等于400万。

6.如权利要求1所述的一种基于视觉的矿质混合料成分实时检测方法，其特征在于，所述步骤四中的投料周期为间隔时间最长的间隔投料成分两次投料的时间跨度。

7.如权利要求6所述的一种基于视觉的矿质混合料成分实时检测方法，其特征在于，所述步骤六中统计投放结果的具体方式为：

在投料周期内统计石灰石和黄土缺失的图片张数以整个周期图像张数，获取石灰石和黄土缺失的图片张数占整个周期图像张数的比例，并将这个比例作为石灰石和黄土的缺料程度值，统计校正料检出框累加值在整个周期的比例，石灰石和黄土的缺料程度值的公式为：

式中：D_SH为石灰石和黄土的缺料程度值，N为石灰石和黄土缺失的图片张数，M为整个周期图像张数；

校正料的投放量拟合公式为：

式中：IOU_adj为校正料的投放量拟合值，S_adj为校正料检出框面积的累加值，S_all为整个周期图像传送带载料面积的累加值。