[发明专利]图像处理方法、装置、设备、存储介质以及程序产品

说明书

本公开公开了图像处理方法、装置、设备、存储介质及程序产品，涉及图像处理技术领域。具体实现方案为：从包括目标对象的图像中，获取目标对象的至少一个部件的待处理图像；将至少一个部件的待处理图像作为结点元素，利用结点元素构建目标对象的所有部件的关联图；将关联图输入到图神经网络模型，利用图神经网络模型输出目标对象的所有部件的纹理补全的图像。本公开实施例可针对目标对象生成高质量的完整的三维纹理贴图，能够显著降低三维纹理重建的成本，实现目标对象全方位的仿真渲染。

技术领域

本公开涉及一种计算机技术领域，尤其涉及一种图像处理技术领域。

背景技术

三维模型纹理贴图补全技术是重建外观完整的三维模型的必要途径，也是使用重建模型进行仿真并为深度神经网络提供训练资源的重要步骤。目前在单目图像纹理重建任务中，由于图像拍摄视角单一性，无法获取目标对象的完整的纹理贴图。以车辆作为目标对象为例，从正面对车辆进行拍摄，无法拍摄到车辆的尾灯。因此需要采用三维模型纹理贴图补全技术将目标对象中的缺失部分进行补全。

目前三维模型纹理贴图补全采用的纯色填充和双线性插值的方法生成图像的视觉效果不佳，且无法对物体纹理语义特征进行重构，例如无法重构车灯、车窗等部件。

发明内容

本公开提供了一种图像处理方法、装置、设备、存储介质及程序产品。

根据本公开的一方面，提供了一种图像处理方法，包括：

从包括目标对象的图像中，获取目标对象的至少一个部件的待处理图像；

将至少一个部件的待处理图像作为结点元素，利用结点元素构建目标对象的所有部件的关联图；

将关联图输入到图神经网络模型，利用图神经网络模型输出目标对象的所有部件的纹理补全的图像。

根据本公开的另一方面，提供了一种图像处理装置，包括：

获取单元，用于从包括目标对象的图像中，获取目标对象的至少一个部件的待处理图像；

第一构建单元，用于将至少一个部件的待处理图像作为结点元素，利用结点元素构建目标对象的所有部件的关联图；

处理单元，用于将关联图输入到图神经网络模型，利用图神经网络模型输出目标对象的所有部件的纹理补全的图像。

根据本公开的又一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与至少一个处理器通信连接的存储器；其中，

存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行本公开任意一项实施例所提供的方法。

根据本公开的又一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，该计算机指令用于使该计算机执行本公开任意一项实施例所提供的方法。

根据本公开的又一方面，提供了一种计算机程序产品，包括计算机程序，该计算机程序在被处理器执行时实现本公开任意一项实施例所提供的方法。

上述申请中的一个实施例具有如下优点或有益效果：可针对目标对象生成高质量的完整的三维纹理贴图，能够显著降低三维纹理重建的成本，实现目标对象全方位的仿真渲染。以车辆作为目标对象为例，通过车辆的三维模型重建可极大地丰富自动驾驶仿真数据库，为感知系统训练提供了丰富的资源。

应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明

附图用于更好地理解本方案，不构成对本公开的限定。其中：