[发明专利]介导现实中的基于多重空间定位的前景抽取方法及系统

说明书

本发明提出了一种介导现实中的基于多重空间定位的前景抽取方法及系统，包括：制作等比例模型，并使用反差大的单一颜色，注上标记点；使用固定摄像头和测量工具标定物理空间中VR头盔相对VR定位摄像头位置，并设置虚拟空间中摄像机位置，即VR头盔位置；采用3D深度摄像头连接到视频图像处理计算机进行采集，采集后的彩色视频和深度视频进行深度抽取的预处理，将上一步处理后的视频以多个特征点或标记点作为轮廓进行前景抽取；结合虚实空间的不同深度，计算对齐偏差，再进行校正，采用着色器将虚拟场景中的模型作为遮罩，抽取遮罩下的视频图像。本发明对每帧拍摄视频和虚拟场景图像中的所有特征点进行逐一匹配，误差低且处理速度快。

技术领域

本发明涉及图像处理技术领域，特别涉及一种介导现实中的基于多重空间定位的前景抽取方法及系统。

背景技术

图像前景抽取方法是智能视频处理的关键一步，其优劣直接影响到之后的判断、分析和识别。前景提取的通常方法受目标运动速度影响大，且精度不够高，只能获取目标大致位置和方向信息。而三维虚拟场景和视频实景的高度融合(以下简称虚实融合)的首要步骤就是需要知道图像前景的确切位置和方向，单一的前景抽取方法不足以满足虚实融合的要求。除精度外，虚实融合实时性要求极高，时间复杂度高的通常算法无法在单位帧生成时间内完成融合过程。并且，现有技术的处理速度慢，时间复杂度高。

现有的图像处理方法无法通过一帧彩色图像和一帧深度图像对物理空间尤其是深度定位到毫米mm级，忽略了虚拟空间中的定位。

发明内容

本发明的目的旨在至少解决所述技术缺陷之一。

为此，本发明的目的在于提出一种介导现实中的基于多重空间定位的前景抽取方法及系统。

为了实现上述目的，本发明的实施例提供一种介导现实中的基于多重空间定位的前景抽取方法，包括如下步骤：

步骤S1，制作等比例模型，并使用反差大的单一颜色，注上标记点；

步骤S2，使用固定摄像头和测量工具标定物理空间中VR头盔相对VR定位摄像头位置，并设置虚拟空间中摄像机位置，即VR头盔位置；

步骤S3，采用3D深度摄像头连接到视频处理计算机进行采集，采集后的彩色视频和深度视频进行深度抽取的预处理，将上一步处理后的视频以多个特征点或标记点作为轮廓进行前景抽取，

采用着色器在视景处理计算机对虚拟场景进行实时截图，进行虚实注册坐标系变换，并对齐视频图像和虚拟场景截图的特征点或标记点，采用着色器计算虚拟场景中的模型特征点或标记点上的深度；

步骤S4，结合虚实空间的不同深度，计算对齐偏差，再进行校正，采用着色器将虚拟场景中的模型作为遮罩，抽取遮罩下的视频图像。

进一步，在所述步骤S4中，采用着色器将虚拟场景中的模型作为遮罩，包括：模型贴图预先采用与场景颜色反差大的颜色。