[发明专利]适用于公路上的音视频采集、识别和监测的立体感知系统

说明书

本发明提供的适用于公路上的音视频采集、识别和监测的立体感知系统，包括多组立体感知组件和处理器模块，不同立体感知组件设置于公路的不同位置，且相邻两组立体感知组件的监测区域具有重叠部分；在公路上设置立体感知系统对公路上的环境及交通情况进行立体化的感知，其中的视频监控可以起到如同巡检人员的眼睛的作用，而音频监控可以起到如同巡检人员耳朵的作用，并且由于不同立体感知组件的监测区域是具有重叠部分的，所以能够确保立体感知组件覆盖了公路的整个范围，因此能够弥补人工巡检过程中无法实时对所有区域进行监测的问题。

技术领域

本发明涉及智慧交通控制技术领域,具体涉及一种适用于公路上的音视 频采集、识别和监测的立体感知系统。

背景技术

目前，在道路上每隔一段距离会安装有摄像头，通过摄像头对行驶车辆 进行连续拍摄，从而能够确定车辆是否有违法行为。采用这种方式，要想获 得有效的清晰的图像，对于能见度的要求比较高，虽然很多摄像头的旁边安 装了光源用于辅助照明以提高摄像头在拍摄时的能见度，但是对于有雾天 气、雨雪天气等情况下的效果依然有待提升。

另外，现有技术中的道路信息采集仅依靠摄像头采集到的视频信息，不 具有全面性。其安全预警方面还依然需要依靠较多的警力人员来实现，需要 耗费较大的人力成本。

发明内容

为此，本发明所要解决的现有技术中的道路信息采集系统不能实现对道 路的信息全面采集，需要消耗较大人力成本的技术问题，进而提供一种适用 于公路上的音视频采集、识别和监测的立体感知系统。

为解决上述技术问题，本发明提供一种适用于公路上的音视频采集、识 别和监测的立体感知系统，包括多组立体感知组件和处理器模块，不同立体 感知组件设置于公路的不同位置，且相邻两组立体感知组件的监测区域具有 重叠部分；其中：

所述处理器模块中预设有第一机器学习模型和第二机器学习模型，所述 第一机器学习模型用于接收视频信号并输出针对视频信号的解析结果，所述 第二机器学习模型用于接收音频信号并输出针对音频信号的解析结果；

所述立体感知组件包括视频检测器和音频检测器；所述视频检测器用于 采集监测区域内的视频检测信号，并输出至所述处理器模块；所述音频检测 器用于采集监测区域内的音频检测信号，并输出至所述处理器模块；

所述处理器模块接收所述视频检测信号和所述音频检测信号，通过所述 第一机器学习模型解析所述视频检测信号并输出针对所述视频检测信号的 第一解析结果，通过所述第二机器学习模型解析所述音频检测信号并输出针 对所述音频检测信号的第二解析结果；

根据所述第一解析结果和所述第二解析结果相融合后的检测信息获取 与相应检测区域对应的立体感知结果。

优选地，上述的适用于公路上的音视频采集、识别和监测的立体感知系 统中：

所述立体感知组件中还包括超声检测器，所述超声检测器用于对监测区 域内的障碍物状态进行检测并输出超声检测结果至所述处理器模块；

所述处理器模块中预设有超声信号解析模型，所述超声信号解析模型解 析所述超声检测结果以确定所述监测区域内的第一障碍物状态；

所述处理器模块还包括验证模块，所述验证模块接收所述第一机器学习 模型输出的第一解析结果和所述超声信号解析模型输出的第一障碍物状态， 并利用所述第一障碍物状态对所述第一解析结果进行验证，若所述第一障碍 物状态与所述第一解析结果之间的一致性超过设定值时判定所述第一解析 结果有效。

优选地，上述的适用于公路上的音视频采集、识别和监测的立体感知系 统中：

所述立体感知组件中还包括红外检测器，所述红外检测器用于对监测区 域内的障碍物状态进行检测并输出红外检测结果至所述处理器模块；