[发明专利]一种基于混合现实的虚拟装修方法、系统、设备和介质

说明书

本发明提出一种基于混合现实的虚拟装修方法、系统、设备和介质，通过获取目标场景不同位置的视频流，根据视频流获取目标场景的多个图像信息；利用多个图像信息计算不同位置的深度信息、点云信息和视频流以实现目标场景的测距；基于测距得到目标场景的距离信息，根据距离信息及图像信息构建目标场景的虚拟三维模型；获取装修数据，根据虚拟三维模型及装修数据实时渲染得到装修三维模型；将装修三维模型与目标场景的虚拟三维模型匹配标记；通过混合现实将装修三维模型实时叠加到真实的目标场景中。本发明将装修三维模型实时叠加到真实的目标场景中，以获得用户需要的装修效果，混合现实的叠加使装修效果更真实，帮助用户更好的进行看房及装修。

技术领域

本发明涉及计算机视觉技术领域，尤其涉及一种基于混合现实的虚拟装修方法、系统、设备和介质。

背景技术

随着我国经济的不断发展，人民生活水平逐渐提高，越来越多的人购房或自建房，因为每家每户的装修理念不同，虽然装修设计公司可以提供三维设计图给到用户，但不少装修公司装修交付成果与用户期望中的设计图相差甚远，往往不能达到客户需求。而不少虚拟装修模型，因为每一用户的房型不同，因为尺寸偏差或者视觉偏差造成并不能真实反映出装修效果。

其次，用户在买房时多数都是以毛坯房或样板房出售，用户在看房时并不能真实体验出此房型的居住效果，以此造成用户的看房体验并不好。

因此亟待提出一种可以使装修设计能够真实还原装修效果的方法。

发明内容

基于此，有必要针对上述问题，提出一种基于混合现实的虚拟装修方法、系统、设备和介质，以改善现有技术中存在的如何使装修三维模型能够真实还原装修效果的技术问题。

第一方面，提供了一种基于混合现实的虚拟装修方法，包括：

通过球幕相机获取目标场景不同位置的视频流，根据所述视频流获取目标场景的多个图像信息；

利用所述多个图像信息计算对应不同位置的深度信息，根据所述深度信息计算对应位置的点云信息，根据所述点云信息追踪当前位置的视频流以实现目标场景的测距；

基于所述测距得到目标场景的距离信息，根据所述距离信息及所述图像信息构建目标场景的虚拟三维模型；

获取装修数据，根据所述目标场景的虚拟三维模型及装修数据实时渲染得到装修三维模型；

将所述装修三维模型与所述目标场景的虚拟三维模型匹配标记；

通过混合现实将所述装修三维模型实时叠加到真实的目标场景中。

作为优选的，利用所述多个图像信息计算对应不同位置的深度信息、点云信息和视频流以实现目标场景的测距，包括：

所述多个图像信息具有重叠的特征区域，根据所述特征区域获取至少第一位置、第二位置，计算不同图像信息中所述第一位置和第二位置的坐标，通过所述坐标标记所述第一位置、第二位置的像素坐标信息，并结合所述特征区域的灰度信息、视差信息计算图像信息中不同位置的深度信息；

根据所述深度信息获取对应位置的点云信息，根据所述点云信息追踪当前位置的视频流，并提取目标场景中特定区域的点云信息和视频流，根据特定区域的点云信息和视频流进行目标场景的测距。

作为优选的，所述基于所述测距得到目标场景的距离信息，根据所述距离信息及所述图像信息构建目标场景的虚拟三维模型，包括：

根据所述距离信息建立数字化模型，并对所述数字化模型进行回环检测，利用所述图像信息贴图到所述数化字模型上，得到所述目标场景的虚拟三维模型。

作为优选的，所述获取装修数据，根据所述目标场景的虚拟三维模型及装修数据实时渲染得到装修三维模型，包括：