[发明专利]一种基于transformer编码器的牙体点云补全方法及系统在审
| 申请号: | 202111419107.6 | 申请日: | 2021-11-26 |
| 公开(公告)号: | CN114066772A | 公开(公告)日: | 2022-02-18 |
| 发明(设计)人: | 贾修一;朱浩宇;廖文和;张长东;刘婷婷 | 申请(专利权)人: | 南京理工大学 |
| 主分类号: | G06T5/00 | 分类号: | G06T5/00;G06T3/40;G06N3/04;G06K9/62 |
| 代理公司: | 南京苏高专利商标事务所(普通合伙) 32204 | 代理人: | 徐红梅 |
| 地址: | 210094 江苏省南*** | 国省代码: | 江苏;32 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 基于 transformer 编码器 牙体点云补全 方法 系统 | ||
1.一种基于transformer编码器的牙体点云补全方法,其特征在于,包括以下步骤:
S1、使用动态图卷积神经网络DGCNN对统一尺度后的牙体点云数据集处理,得到聚类中心并提取出中关键点的局部特征并根据聚类中心和局部特征得到特征矩阵
S2、利用transformer编码器对聚类中心和围绕各关键点的局部特征进行编码,挖掘出用于描述缺失部位牙齿的潜在向量使用一个多层感知机MLP从潜在向量预测出缺失牙齿的低分辨率点云Yc;
S3、将低分辨率点云Yc和潜在向量结合构成重构特征使用多尺度点云生成器从和Yc恢复出高分辨率点云Yf,组合Yc和Yf得到最终牙体点云Ypred;
S4、通过最小化Ypred和对应真实缺失牙齿金标准Ygt之间的切夫距离,完成牙体补全模型的训练;
S5、使用训练好的牙体补全模型对测试数据进行补全,得到完整牙体点云,并使用指标进行评价。
2.根据权利要求1所述的一种基于transformer编码器的牙体点云补全方法,其特征在于,步骤S1包括以下步骤:
S11、设牙体点云数据集为S={(x1,y1),(x2,y2),...,(xL,yL)},其中,xi表示不完整牙体点云,yi表示对应缺失牙齿金标准,i=1,…,L,L表示数据集中样本数量;使用最远点采样FPS将牙体点云数据集中所有样本采样到相同的点数,并对其进行正则化得到尺度相同的牙体点云数据集;
S12、使用动态图卷积神经网络DGCNN对步骤S11最终得到的统一尺度后的牙齿点云数据集进行聚类,得到聚类中心该聚类中心包含若干关键点坐标,同时提取出围绕各关键点的局部特征
S13、使用两个不同的多层感知机MLP分别对和处理,并将处理结果相加在一起作为不完整牙体点云的特征;不完整牙体点云的特征矩阵为:
其中,其中和分别是处理和的第一多层感知机和第二多层感知机,表示不完整牙体点云的特征矩阵。
3.根据权利要求1所述的一种基于transformer编码器的牙体点云补全方法及系统,其特征在于,步骤S2具体为:
transformer编码器根据步骤S1中获取的特征矩阵按照聚类中心中的关键点坐标进行查询,然后通过线性层的特征聚合和最大池化来进一步学习局部几何结构;聚类中心提供语义特征信息和编码器学习结构特征信息,把语义特征信息和编码器学习结构特征信息结合起来,将transformer编码器的结果作为潜在向量该潜在向量描述了缺失部位的几何结构和数值范围;接着使用一个多层感知机从潜在向量中预测出低分辨率点云Yc;潜在向量和低分辨率点云Yc的表达式为:
其中,是特征矩阵,是用于预测低分辨率点云Yc的第三多层感知机。
4.根据权利要求1所述的一种基于transformer编码器的牙体点云补全方法,其特征在于,步骤S3具体为:
多尺度点云生成器包括第四多层感知机和第五多层感知机,首先,将步骤S2得到的潜在向量和低分辨率点云从第一维度连接在一起作为重建特征第四多层感知机从预测出分辨率较高的中间点云,然后将中间点云与进一步按第一维度连接在一起,作为第五多层感知机的输入,第五多层感知机预测出高分辨率点云Yf,最后将Yf和Yc按第一维度拼接在一起作为最终的预测点云Ypred;重建特征和最终的预测点云Ypred的公式表示为:
其中,表示重建特征,和分别表示第四多层感知机和第五多层感知机,表示矩阵连接操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京理工大学,未经南京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111419107.6/1.html,转载请声明来源钻瓜专利网。
- 基于Transformer+LSTM神经网络模型的商品销量预测方法及装置
- 一种基于Transformer模型自然场景文字识别方法
- 一种深度Transformer级联神经网络模型压缩算法
- 点云分割方法、系统、介质、计算机设备、终端及应用
- 基于Transformer的中文智能对话方法
- 一种基于改进Transformer模型的飞行器故障诊断方法和系统
- 一种基于Transformer模型的机器翻译模型优化方法
- 基于Transformer和增强交互型MPNN神经网络的小分子表示学习方法
- 基于U-Transformer多层次特征重构的异常检测方法及系统
- 基于EfficientDet和Transformer的航空图像中的飞机检测方法





