[发明专利]带有交互功能的增强现实的方法及其系统

摘要

带有交互功能的增强现实的方法及其系统，包括：初始化系统环境、配置系统参数；选择或提取一幅标志物正视图，对标志物进行训练，获得训练数据；计算标志物图像的相机内部参数并进行校正；对摄像头拍摄到的真实环境中的每一帧，进行校正，基于训练数据识别标志物，计算该标志物在摄像头坐标系中的相对位置矩阵，并通过对已识别标志物和标志物正视图的亮度进行比对来估算标志物所处环境的光照信息；通过识别出的标志物寻找对应虚拟模型，利用提取出的标志物位置矩阵确定模型的位置，绘制虚拟模型，设置交互区域并与用户的交互。本发明极大地减少了对标志物的限制，可用于对地图与复杂二维图像进行标示，也可在任意二维图像上合成三维模型。

主权项

1、一种带有交互功能的增强现实的方法，其特征在于包括以下步骤：步骤10)、初始化系统环境、配置系统参数；步骤20)、选择或提取一幅标志物正视图，对标志物进行训练，获得训练数据；步骤30)、计算标志物图像的相机内部参数并进行校正；步骤40)、对摄像头拍摄到的真实环境中的每一帧，利用步骤30)中的数据进行校正，再基于步骤20)中的训练数据识别标志物，若含有标志物，则计算该标志物在摄像头坐标系中的相对位置矩阵，并通过对已识别标志物和标志物正视图的亮度进行比对来估算标志物所处环境的光照信息；步骤50)、通过识别出的标志物寻找对应虚拟模型，利用提取出的标志物位置矩阵确定模型的位置；步骤60)、在真实拍摄的视频帧上根据计算出的相对位置绘制虚拟模型；步骤70)、在标志物附近设置交互区域，通过检测交互区域内是否被手覆盖，实现与用户的交互。