[发明专利]3D模型重建方法、装置及电子设备

权利要求书

1.一种3D模型重建方法，其特征在于，包括：

对从包含目标对象的图像集合中选取的第一图像执行3D重建操作，形成针对所述目标对象的第一3D临时模型，所述第一3D临时模型与所述第一图像中的目标对象具有相同的轮廓表面；

利用所述第一3D临时模型及所述图像集合中的第二图像，构建针对所述目标对象的第二3D临时模型，所述第二3D临时模型与所述第二图像中的目标对象具有相同的轮廓表面；

当所述第二3D临时模型与所述第一3D临时模型的轮廓误差小于预设阈值时，将所述第二3D临时模型作为所述目标对象的3D重建模型；

所述利用所述第一3D临时模型及所述图像集合中的第二图像，构建针对所述目标对象的第二3D临时模型，包括：对所述第一3D临时模型执行姿态拉伸操作，使所述第一3D临时模型处于初始姿态状态；对处于初始姿态状态的第一3D临时模型执行模型重建操作，形成所述第二3D临时模型。

2.根据权利要求1所述的方法，其特征在于，所述利用所述第一3D临时模型及所述图像集合中的第二图像，构建针对所述目标对象的第二3D临时模型之后，所述方法还包括：

当所述第二3D临时模型与所述第一3D临时模型的误差大于预设阈值时，利用所述第二3D临时模型及所述图像集合中的第三图像，构建针对所述目标对象的第三3D临时模型，所述第三3D临时模型与所述第三图像中的目标对象具有相同的轮廓表面。

3.根据权利要求1所述的方法，其特征在于，所述利用所述第一3D临时模型及所述图像集合中的第二图像，构建针对所述目标对象的第二3D临时模型之后，所述方法还包括：

获取所述第一3D临时模型和所述第二3D临时模型之间的轮廓误差；

基于所述轮廓误差判断所述第二3D临时模型与所述第一3D临时模型的误差是否小于预设阈值。

4.根据权利要求1所述的方法，其特征在于，所述利用所述第一3D临时模型及所述图像集合中的第二图像，构建针对所述目标对象的第二3D临时模型，包括：

获取所述第二3D临时模型中任一三角面片的可视比例；

基于所述可视比例来选择所述三角面片上的贴图信息。

5.根据权利要求4所述的方法，其特征在于，所述利用所述第一3D临时模型及所述图像集合中的第二图像，构建针对所述目标对象的第二3D临时模型，还包括：

查找所述第二3D临时模型中不存在对应贴图信息的三角面片；

利用预设的神经网络模型预测不存在对应贴图信息的三角面片的贴图信息。

6.根据权利要求1所述的方法，其特征在于，所述对从包含目标对象的图像集合中选取的第一图像执行3D重建操作，形成针对所述目标对象的第一3D临时模型，包括：

对所述第一图像上存在的目标对象执行分割操作，以获得所述目标对象的分割掩码；

基于所述分割掩码，获取所述目标对象在所述第一图像上的纹理贴图；

对所述目标对象执行骨骼检测，形成所述目标对象的3D骨骼模型；

将所述纹理贴图与所述3D骨骼模型按照对应关系进行匹配，形成所述目标对象的第一3D临时模型。

7.根据权利要求6所述的方法，其特征在于，所述对所述目标对象执行骨骼检测，形成所述目标对象的3D骨骼模型，包括：

将预设的3D初始模型投影到2D平面上，形成模型轮廓；

基于所述分割掩码，形成所述目标对象的输入轮廓；

在所述输入轮廓和所述模型轮廓上分别设置第一关键点集合和第二关键点集合，所述第一关键点集合与所述第二关键点集合中关键点的数目相同且一一对应；

计算所述模型轮廓中任一关键点pi在所述输入轮廓中的对应平面坐标(xi，yi)；

根据输入轮廓和模型轮廓在长、宽上的变化比例，变换所述3D初始模型中任一关键点pi的空间坐标zi；

基于所述平面坐标和所述空间坐标，确定所述3D骨骼模型的最终形状。