[发明专利]车内人员危险动作识别方法和装置、电子设备、存储介质

说明书

本公开实施例公开了一种车内人员危险动作识别方法和装置、电子设备、存储介质，其中，方法包括：利用车载摄像头获得车内人员的至少一个视频流，每个所述视频流中包括至少一个车内人员；基于所述视频流对所述车内人员进行动作识别；响应于所述动作识别的结果属于预定的危险动作，发出提示信息和/或执行操作以控制车辆，通过动作识别确定车内人员是否做出预定的危险动作，并对预定的危险动作做出对应的提示和/或操作以控制车辆，实现对车辆安全状况尽早发现，以降低发生危险情况的概率。

技术领域

本公开涉及计算机视觉技术，尤其是一种车内人员危险动作识别方法和装置、电子设备、存储介质。

背景技术

随着车内人员工智能的发展日新月异，各种AI技术纷纷落地，目前市场上对于驾驶员监控的需求愈发急切。驾驶员监控主要的功能模块大致可以归结为车内人员脸识别、疲劳检测等模块。通过对驾驶员的状态进行监控，可以及时发现危险信号，提前对可能发生的危险进行预防和处理，以提高驾驶安全性。

发明内容

本公开实施例提供了一种车内人员危险动作识别技术。

根据本公开实施例的一个方面，提供的一种危险动作识别方法，包括：

利用车载摄像头获得车内人员的至少一个视频流，每个所述视频流中包括至少一个车内人员；

基于所述视频流对所述车内人员进行动作识别；

响应于所述动作识别的结果属于预定的危险动作，发出提示信息和/或执行操作以控制车辆；所述预定的危险动作包括所述车内人员的动作表现为以下至少之一：分心动作、不适状态、不规范行为。

可选地，在本公开上述任一方法实施例中，所述基于所述视频流对所述车内人员进行动作识别，包括：

在所述视频流的至少一帧视频图像中检测所述车内人员包括的至少一个目标区域；

根据所述检测获得的目标区域从所述视频流的至少一帧视频图像中截取与所述目标区域对应的目标图像；

根据所述目标图像对所述车内人员进行动作识别。

可选地，在本公开上述任一方法实施例中，所述在所述视频流的至少一帧视频图像中检测所述车内人员包括的至少一个目标区域，包括：

提取所述视频流的至少一帧视频图像中包括的车内人员的特征；

基于所述特征从所述至少一帧视频图像中提取可能包括动作的目标区域，其中，所述目标区域包括以下至少之一：人脸局部区域、动作交互物和肢体区域。

可选地，在本公开上述任一方法实施例中，所述人脸局部区域，包括以下至少之一：嘴部区域，耳部区域，眼部区域。

可选地，在本公开上述任一方法实施例中，所述动作交互物，包括以下至少之一：容器、烟、手机、食物、工具、饮料瓶、眼镜、口罩。

可选地，在本公开上述任一方法实施例中，所述分心动作包括以下至少之一：打电话、喝水、戴摘墨镜、戴摘口罩、吃东西；和/或，

所述不适状态包括以下至少之一：擦汗、揉眼睛、打哈欠；和/或，

所述不规范行为包括以下至少之一：抽烟、将手伸出车外、趴在方向盘上、双脚放在方向盘上、双手离开方向盘、手持器械、干扰驾驶员。

可选地，在本公开上述任一方法实施例中，所述响应于所述动作识别的结果属于预定的危险动作，发出提示信息和/或执行操作以控制车辆，包括：

响应于所述动作识别的结果属于预定的危险动作；

获取所述预定的危险动作的危险级别；