[发明专利]数字化生产管理系统、视频处理方法、设备及存储介质

说明书

本申请实施例提供一种数字化生产管理系统、视频处理方法、设备及存储介质。在本申请实施例中，数字化生产管理系统包括中心管控节点、边缘网关节点以及部署在生产环境中的图像采集设备和各生产线上的生产设备。其中，图像采集设备可以对生产环境中的生产行为进行视频采集，并通过边缘网关节点将采集到的视频流上报给中心管控节点进行事件识别。其中，中心管控节点在事件识别处理过程中，融入了能够考虑历史视频帧中特征信息的因果卷积处理，使得能够以当前视频帧为输入进行事件识别，既可以提高视频流实时分析能力，又能实现对长时动作的兼顾；而且在事件识别过程中，同时结合瞬时状态和长时动作进行事件识别，提高了事件识别的准确度。

技术领域

本申请涉及智能制造技术领域，尤其涉及一种数字化生产管理系统、视频处理方法、设备及存储介质。

背景技术

随着云计算、物联网、人工智能等技术的不断发展，涌现出越来越多的数字化工厂。数字化工厂能够实现产品从原料采购、产品设计以及生产加工等全生产链条的数据化处理；还能够按照柔性制造模式进行生产制造。在柔性制造模式下，数字化工厂以消费者需求为核心，重构传统以产定销的生产模式，实现按需智造。

在数字化生产过程中，难免发生一些异常事件。例如在服装制造行业中，吊挂设备可能停转、裁片可能从吊挂设备上掉落等，这些异常事件可能会对数字化生产过程造成不利影响，因此需要一种能够及时了解生产过程中出现的异常事件的解决方案。

发明内容

本申请的多个方面提供一种数字化生产管理系统、视频处理方法、设备及存储介质，用以能够及时且准确地识别生产过程中出现的一些事件。

本申请实施例提供一种数字化生产管理系统，包括：中心管控节点、边缘网关节点以及部署在生产环境中的图像采集设备和各生产线上的生产设备；

图像采集设备，用于采集生产环境中产生的包含生产行为的视频流，并经边缘网关节点将视频流上报给中心管控节点，视频流包括连续的视频帧；

中心管控节点，用于针对接收到的当前视频帧，基于因果卷积神经网络对当前视频帧进行瞬时状态和长时动作识别，得到当前视频帧中的状态标签和动作标签；根据当前视频帧中的状态标签和动作标签，结合多个历史视频帧中的状态标签和动作标签进行事件识别，得到事件识别结果；经边缘网关节点将事件识别结果发送给对应的生产设备；

生产设备，用于接收事件识别结果，并输出事件识别结果；事件识别结果中包括生产过程中是否发生指定事件。

本申请实施例提供还一种视频处理方法，包括：

接收当前视频帧，基于因果卷积神经网络对当前视频帧进行瞬时状态和长时动作识别，得到当前视频帧中的状态标签和动作标签；

根据当前视频帧中的状态标签和动作标签，结合多个历史视频帧中的状态标签和动作标签进行事件识别，以得到事件识别结果；

其中，事件识别结果中包括是否发生指定事件。

本申请实施例提供还一种视频处理设备，包括：存储器和处理器；

存储器，用于存储计算机程序；

处理器耦合至存储器，用于执行计算机程序以用于执行视频处理方法中的步骤。

本申请实施例提供还一种存储有计算机程序的计算机可读存储介质，当计算机程序被处理器执行时，致使处理器实现视频处理方法中的步骤。