[发明专利]三维模型生成方法及装置在审
| 申请号: | 202111080095.9 | 申请日: | 2021-09-15 |
| 公开(公告)号: | CN115810081A | 公开(公告)日: | 2023-03-17 |
| 发明(设计)人: | 卞琛毓;钮圣虓;何林晋 | 申请(专利权)人: | 上海哔哩哔哩科技有限公司 |
| 主分类号: | G06T17/00 | 分类号: | G06T17/00;G06T19/20 |
| 代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 刘晓楠 |
| 地址: | 200433 上海市*** | 国省代码: | 上海;31 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 三维 模型 生成 方法 装置 | ||
1.一种三维模型生成方法,其特征在于,所述方法包括:
提取二维图像中目标物体的轮廓线,根据所述轮廓线确定所述目标物体的部位图像;
针对每个部位图像,确定该部位图像对应的部位类型,并利用预先建立的该部位类型的二维结构与三维结构之间的结构映射关系,获得该部位图像对应的部位三维模型;
根据预先建立的部位类型与拼接位置的对应关系,拼接各部位三维模型,得到所述目标物体的物体三维模型。
2.根据权利要求1所述的方法,其特征在于,所述提取二维图像中目标物体的轮廓线,根据所述轮廓线确定所述目标物体的部位图像,包括:
对所述二维图像进行二值化处理,得到包含所述轮廓线的黑白图像;
比较所述黑白图像中相邻像素点之间是否相似,根据比较结果,确定所述黑白图像中以所述轮廓线为边界的多个闭合区域;
基于所述多个闭合区域,确定所述目标物体的部位图像。
3.根据权利要求2所述的方法,其特征在于,所述对所述二维图像进行二值化处理,得到包含所述轮廓线的黑白图像,包括:
基于所述二维图像在红、绿和蓝RGB色彩模式下每个像素点的红、绿以及蓝的色彩分量值,将所述二维图像转换为色相、饱和度和透明度HSV模式图像;
对所述HSV模式图像中各像素点进行以下赋值处理,得到所述黑白图像:
对饱和度达到饱和度阈值的像素点赋值为1,对饱和度未达到饱和度阈值的像素点赋值为0。
4.根据权利要求2所述的方法,其特征在于,所述比较所述黑白图像中相邻像素点之间是否相似,根据比较结果,确定所述黑白图像中以所述轮廓线为边界的多个闭合区域,包括:
从所述黑白图像的像素点中选取当前的种子像素点,并根据预设区域大小以所述当前的种子像素点为区域中心,在所述黑白图像中确定当前的候选区域;
分别比较所述候选区域中相邻像素点之间是否相似;
若相似,将所述当前的候选区域的边界上的像素点作为当前的种子像素点,并返回执行所述从所述黑白图像的像素点中选取当前的种子像素点的步骤;
若不相似,将不相似的各像素点形成的边界内的候选区域确定为一个闭合区域,将未确定闭合区域的像素点作为当前的种子像素点,并返回执行所述从所述黑白图像的像素点中选取当前的种子像素点,直到所述黑白图像中不存在未确定闭合区域的像素点。
5.根据权利要求2-4任一项所述的方法,其特征在于,所述基于所述多个闭合区域,确定所述目标物体的部位图像,包括:
确定每个闭合区域的尺寸数据;
针对所述多个闭合区域,若该闭合区域的尺寸数据小于尺寸阈值、且该闭合区域的相邻闭合区域的尺寸数据大于尺寸阈值,则将该闭合区域合并至所述相邻闭合区域;
在合并完成的情况下,将所述黑白图像中属于同一闭合区域的部分作为一个部位图像。
6.根据权利要求2-4任一项所述的方法,其特征在于,所述基于所述多个闭合区域,确定所述目标物体的部位图像,包括:
在所述黑白图像中标注所述多个闭合区域,并输出标注后的黑白图像以及合并提示信息;其中,所述合并提示信息提示用户选择属于所述目标物体同一部位的相邻闭合区域;
接收用户针对所述合并提示信息的选择结果,并根据所述选择结果进行闭合区域的合并;
在合并完成的情况下,将所述黑白图像中属于同一闭合区域的部分作为一个部位的部位图像。
7.根据权利要求1-4任一项所述的方法,其特征在于,所述利用预先建立的该部位类型的二维结构与三维结构之间的结构映射关系,获得该部位图像对应的部位三维模型,包括:
针对每个部位图像,将该部位图像输入预先训练得到的与该部位图像的部位类型对应的生成对抗网络,获得该部位图像对应部位的部位三维模型,其中,任一部位类型对应的生成对抗网络通过该部位类型的样本二维图像和该部位类型的样本三维模型训练得到。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海哔哩哔哩科技有限公司,未经上海哔哩哔哩科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111080095.9/1.html,转载请声明来源钻瓜专利网。





