[发明专利]一种核电厂操作人员操作意图智能识别系统及方法

权利要求书

1.一种核电厂操作人员操作意图智能识别系统，其特征在于，该系统包括意图识别模块、物体检测模块、编码识别模块以及深度信息模块，其中，所述物体检测模块、编码识别模块和深度信息模块均与所述意图识别模块相连接，所述物体检测模块可采集并识别操作环境图像中的设备类型，并传输至所述意图识别模块；所述编码识别模块与所述物体检测模块相连接，并可识别获得所述物体检测模块采集图像中设备的编码信息，并将所述编码信息传输至所述意图识别模块，并与所述设备信息进行关联；所述深度信息模块可计算获得物体检测模块识别设备的深度信息，并根据物体检测模块采集获得的操作员人手或工具与某项设备的距离阈值和距离变化趋势值，判断获得操作人员对某项设备的操作意图信号。

2.根据权利要求1所述的一种核电厂操作人员意图智能识别系统，其特征在于，所述编码识别模块可接收所述物体检测模块采集的设备编码图像，识别获得图像中的文字，并将识别获得设备的编码信息传输至意图识别模块。

3.根据权利要求1所述的一种核电厂操作人员意图智能识别系统，其特征在于，所述编码识别模块接收物体检测模块采集到的识别环境整体图像，识别图像中的设备编码信息，并将识别获得的设备编码信息传输至意图识别模块。

4.根据权利要求1所述的一种核电厂操作人员意图智能识别系统，其特征在于，所述物体检测模块可采集操作环境的图像，并识别图像中的设备类型和位置信息，包括但不限于识别出旋转开关、试验开关、指示灯、报警窗、电流/电压表、设备标识、人手或者操作工具。

5.根据权利要求1所述的一种核电厂操作人员意图智能识别系统，其特征在于，所述系统还包括指令识别模块，所述指令识别模块可实时采集操作人员的语音，并将采集到的语音进行识别后进行文字信息转换，并将文字信息传输至意图识别模块进行处理，并获得语音中包含的设备位号及操作状态作为所述的操作意图信号。

6.根据权利要求1所述的一种核电厂操作人员意图智能识别系统，其特征在于，所述意图识别模块可将物体检测模块识别的设备类型，与所述编码识别模块所识别的设备编码信息相关联；同时，利用所述深度信息模块采集获得相应设备深度信息，整体获得识别环境设备的空间位置矩阵；通过所述物体检测模块识别操作者手或工具与所述操作设备的空间距离，并在判断小于设定阈值后，将其作为对所述操作设备形成的操作意图信号。

7.根据权利要求1所述的一种核电厂操作人员意图智能识别系统，其特征在于，所述意图识别模块可将物体检测模块识别的设备类型，与所述编码识别模块所识别的设备编码信息相关联；同时，利用所述深度信息模块采集获得相应设备深度信息，整体获得识别环境设备的空间位置矩阵；通过所述物体检测模块识别操作者手或工具与所述操作设备的空间距离靠近变化速率最快的，则将其作为对所述操作设备形成的操作意图信号。

8.一种核电厂操作人员意图智能识别方法，其特征在于，该方法具体包括：

S1、实时采集环境图像，并进行图像设备识别；

S2、对图像设备中的编码进行识别，并与图像设备的设备进行关联；

S3、获取图像中设备深度信息，并与识别设备的类型、位置信息相结合，形成设备的空间位置矩阵；

S4、判断采集图像的所述摄像头是否移动，并在出现移动时，实时更新图像设备的空间位置矩阵；

S5、采集并识别操作员手或工具的空间位置矩阵，并计算所述操作员手或工具距某一所述设备的空间距离，并在小于所设定的阈值后，形成操作员对所述设备的操作意图信号。