[发明专利]显示方法及装置、设备、存储介质

说明书

本申请实施例公开了显示方法及装置、设备、存储介质；其中，所述方法包括：根据获取的当前真实场景的第一图像数据，对所述当前真实场景进行三维重建，得到与所述当前真实场景匹配的三维场景模型；获取所述当前真实场景的第二图像数据以及与所述第二图像数据对应的渲染效果参数；在利用所述渲染效果参数在所述第二图像数据上渲染特定虚拟对象的情况下，根据所述三维场景模型，生成所述第二图像数据与所述特定虚拟对象相叠加的增强现实AR效果，并在显示设备上显示所述AR效果。

技术领域

本申请实施例涉及增强现实(Augmented Reality，AR)技术，涉及但不限于显示方法及装置、设备、存储介质。

背景技术

AR技术是一种将特定虚拟对象与真实场景巧妙融合的技术，广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段，将计算机生成的文字、图像、三维模型、音乐、视频等特定虚拟对象模拟仿真后，应用到真实场景中，两种信息互为补充，从而实现对真实场景的“增强”。AR效果的真实感的好坏，直接影响了用户的真实体验。

发明内容

有鉴于此，本申请实施例提供的显示方法及装置、设备、存储介质，能够根据实时重建的三维场景模型，生成真实场景图像(即第二图像数据)与所述特定虚拟对象相叠加的AR效果，从而可以实现对特定虚拟对象的碰撞、遮挡、阴影等渲染处理，进而使得AR效果更真实，提升用户的AR体验；其中，显示方法及装置、设备、存储介质是这样实现的：

本申请实施例提供的显示方法，包括：根据获取的当前真实场景的第一图像数据，对所述当前真实场景进行三维重建，得到与所述当前真实场景匹配的三维场景模型；获取当前真实场景的第二图像数据以及与所述第二图像数据对应的渲染效果参数；在利用所述渲染效果参数在所述第二图像数据上渲染特定虚拟对象的情况下，根据所述三维场景模型，生成所述第二图像数据与所述特定虚拟对象相叠加的AR效果，并在显示设备上显示所述AR效果。这样，基于实时的三维模型重建，使得生成的AR效果更加真实。

在一些实施例中，所述方法还包括：获取所述当前真实场景的图像集合，所述图像集合是由所述显示设备的双目摄像头在当前时刻之前的第一时间段内多次拍摄得到的；从所述图像集合中，选取目标图像对作为所述第一图像数据。

这样，通过双目摄像头获取的图像数据，能够计算出更远距离的物体的深度信息，从而使得重建的三维场景模型包括更远距离的物体的三维模型，进而使得所述显示方法的应用场景更为广泛。

在一些实施例中，所述从所述图像集合中，选取目标图像对作为所述第一图像数据，包括：从所述图像集合中，选取拍摄时间差满足同步精度的第一目标图像和第二目标图像作为所述目标图像对，并将所述目标图像对作为所述第一图像数据；其中，所述第一目标图像是所述双目摄像头的第一摄像头在所述当前真实场景中拍摄得到的；所述第二目标图像是所述双目摄像头的第二摄像头在所述当前真实场景中拍摄得到的。

这样，选择拍摄时间差满足同步精度的两张图像作为第一图像数据，使得基于该图像数据确定的采样点的深度信息更为准确，从而使得重建的三维场景模型更加接近真实情况，进而改善最终AR效果的真实程度。

在一些实施例中，所述方法还包括：获取历史目标图像对集合，所述历史目标图像对集合包括在当前时刻之前的第二时间段内拍摄得到的多个历史目标图像对和每一所述历史目标图像对的拍摄时间差；根据每一所述历史目标图像对的拍摄时间差，对所述双目摄像头的硬件参数进行调整，以使所述双目摄像头在下一时刻的拍摄时间差缩小。

这样，不断地改善双目摄像头硬件本身的同步精度，使得后续的三维重建的准确度也随之提高，进而使得AR效果更加真实。