[发明专利]一种视频融合系统

说明书

本发明属于虚实融合视频监控相关技术领域，具体涉及一种视频融合系统，其包括：三维建模模块、效果调整模块、视频流处理模块、视频畸形矫正模块、视频投射模块；本发明的视频融合技术，通过对监控视频数据流提取视频帧并将其投射到虚拟场景里，实现视频数据与虚拟场景数据的全时空立体融合，改变了地图应用只能静态展示的传统模式，将部署在不同地理位置的多路实时监控视频与监控区域的三维模型进行配准融合，生成大范围三维全景动态监控画面，实现监控区域整体安全态势的实时全局掌控。

技术领域

本发明属于虚实融合视频监控相关技术领域，具体涉及一种视频融合系统。

背景技术

目前，传统视频监控技术的应用，主要以平面矩阵式视频监控画面为主，随着Web信息系统技术、GIS地理信息系统技术、H5视频流技术、三维建模技术的发展和推广应用，用户对视频监控的实现手段提出更高的要求，希望实现一种视频监控与虚拟空间场景结合的创新应用方式。

发明内容

(一)要解决的技术问题

本发明要解决的技术问题是：如何提出一种基于Web信息系统的视频数据与GIS地理信息系统虚拟场景相结合的视频监控方案，使视频监控画面与虚拟场景进行融合，能够一图看尽全局，降低监控操作复杂性。

(二)技术方案

为解决上述技术问题，本发明提供一种视频融合系统，所述视频融合系统包括：三维建模模块、效果调整模块、视频流处理模块、视频畸形矫正模块、视频投射模块；

其中，

所述三维建模模块用于采用无人机航拍倾斜摄影建模的方法，控制无人机搭载五目数码相机拍摄目标的建模区域的数码照片，并利用三维模型生成工具将数码照片转换成三维模型；

所述效果调整模块用于将三维模型加载到地理信息系统，对三维模型进行调整，包括模型简化、三维坐标设置、位置调整、比例尺调整，以搭建类真实的虚拟场景；

所述视频流处理模块用于从视频监控摄像头、视频服务器设备处拉取RTSP视频流，通过H5Stream服务将RTSP视频流转换成支持Html5协议的视频码流；

所述视频畸形矫正模块用于采用OPENCV算法库里的相机畸变矫正工具，应用棋盘格图片矫正参数的方法将具备广角参数、桶形畸变的视频码流的视频监控画面画面进行调整，裁剪截取视频监控画面的有效视域，将视频监控画面画面与虚拟场景中的空间位置进行匹配；

所述视频投射模块用于参照视频监控画面的有效视域，在虚拟场景中对应的坐标点上构建一个多边形平面作为视频投射的载体，然后将支持Html5协议的视频码流作为多边形平面的材质进行加载；视频投射时需要将多路独立视频的拼接组成一个整体场景，将相邻的多边形块进行位置和大小调整，直至相邻多边形块边缘区域连续无间隙。

其中，所述三维建模模块包括：飞行路线规划单元、无人机控制单元、照片导入单元、三维模型修正单元；

所述飞行路线规划单元用于规划建模区域并整理坐标信息，规划无人机水平飞行路线，指定飞行高度，飞行区域覆盖建模区域；

所述无人机控制单元用于控制无人机搭载五目数码相机按照所述飞行路线规划单元规划的飞行路线进行飞行，使用五目数码相机周期性连续拍摄地面照片；

所述照片导入单元用于将无人机拍摄的地面照片统一导入三维模型生成工具，生成倾斜摄影的三维模型；

所述三维模型修正单元用于检查三维模型生成工具生成的倾斜摄影的三维模型，并控制无人机补拍重点区域实景照片对模型材质和纹理进行精细化修正。

其中，所述三维模型生成工具为Smart3D软件工具。

其中，所述建模区域包括建筑、道路、绿植、固定设施。