[发明专利]一种全景视频融合方法、系统及视频处理设备

摘要

本发明适用于视频处理技术领域，提供了一种全景视频融合方法，包括以下步骤：计算待融合的n路摄像机视场到全景视场的投影变换，并计算这n路摄像机视场的数字化全景镶嵌视场V1、V2、...、Vn；计算全景镶嵌视场V1、V2、...、Vn的融合加权系数图W1、W2、...、Wn；对n路摄像机实时采集的图像投影变换到全景镶嵌视场，计算它们在全景视场中的镶嵌图T1、T2、...、Tn；根据视场融合系数图W1、W2、...、Wn，以及全景镶嵌图T1、T2、...、Tn，计算瞬时全景视频。本发明提供的全景视频融合技术的原理与摄像机视场的具体几何形状、以及摄像机之间重叠视场的具体几何形状无关，且在摄像机参数不变的情况下只需要计算一次，因此该过程可以快速并行实现。

主权项

一种全景视频融合方法，其特征在于，包括以下步骤：步骤a1，利用待融合的n个摄像机分别各采集一幅数字视频图像，并分别计算采集到的n幅图像到全景视场的投影变换，得到n幅图像的数字化全景镶嵌视场V1、V2、...、Vn；其中，所述全景视场由n路视频中的任意一路视频的视场在空间坐标方向上进行延拓后得到；步骤a2，根据步骤a1的计算得到的n幅图像的数字化全景镶嵌视场V1、V2、...、Vn计算所述n幅图像的全景整体视场VP；步骤a3，对所述全景整体视场VP中的每一个像素点，计算覆盖所述像素点的所有的镶嵌视场的相异视场边界集合Esk；步骤a4，计算所述像素点到每一个相异视场边界集合Esk的距离，并进一步根据计算得到的距离分别计算所述像素点针对于所述每一个相异视场边界集合Esk相关联的镶嵌视场的融合加权系数wsk；步骤a5，根据步骤a4的计算结果计算待融合的n个摄像机的数字化全景镶嵌视场V1、V2、...、Vn的融合加权系数图W1、W2、...、Wn；步骤a6，计算n个摄像机的视频图像在所述数字化全景镶嵌视场V1、V2、...、Vn中的全景镶嵌图T1、T2、...、Tn；步骤a7，结合步骤a5计算得到的n个摄像机的数字化全景镶嵌视场V1、V2、...、Vn的融合加权系数图和步骤a6计算得到的全景镶嵌图T1、T2、...、Tn，根据如下公式计算瞬时全景视频图像TP： T p ( X ) = Σ k = 1 n ( W k ( X ) T k ( X ) ) , 其中X为全景视场中的像素点。