[发明专利]一种点云的语义分割方法、装置及存储介质在审
申请号: | 202211409147.7 | 申请日: | 2022-11-11 |
公开(公告)号: | CN115641440A | 公开(公告)日: | 2023-01-24 |
发明(设计)人: | 王宗跃;谢道顺;陈屹东;苏锦河;陈文平;陈智鹏 | 申请(专利权)人: | 集美大学;赛维时代科技股份有限公司 |
主分类号: | G06V10/26 | 分类号: | G06V10/26;G06V10/82;G06V20/64;G06V20/70 |
代理公司: | 厦门市精诚新创知识产权代理有限公司 35218 | 代理人: | 魏秀珍 |
地址: | 361000 福*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 语义 分割 方法 装置 存储 介质 | ||
1.一种点云的语义分割方法,其特征在于,包括:
S1,多尺度编解码网络对输入的第一点云P进行采样,其中,P={PG,PP},PG为标注点形成的点云,PG中点的数量小于预定的数目,PP为未标注点形成的点云,所述PG中的点具有真实标签,所述PP中的点具有即时生成的伪标签,基于每个采样点划定邻域范围,在所述邻域范围内采用点Transformer的方式提取所述邻域范围内各点的特征,然后将所述邻域范围内各点的特征聚合到每个采样点,得到每个采样点的聚合特征,并基于所述聚合特征得到所述点云P中每个点的多尺度特征和所述点云P中每个点的语义类别概率分布其中,i表示第i个点;
S2,根据预设的半径范围,圆环卷积网络将输入的第二点云Pt划分成多个圆环,获取各圆环的特征,采用3D稀疏卷积来提取各圆环的体素特征,并通过点体素索引表将体素特征投影到所述点云Pt的每个点来得到逐点特征并进而获得所述点云Pt中每个点的语义类别概率分布其中,i表示第i个点;其中,所述圆环为三维圆环,所述点云Pt与所述点云P相同或为由所述点云P经过预定变换获得的点云;
S3,针对所述点云Pt中的每个未标注点,取每个未标注点的语义类别概率分布中的最大值作为该未标注点更新后的伪标签,其中更新后的伪标签表示为
其中,所述多尺度编解码网络和所述圆环卷积网络预先经过了训练,训练采用的损失函数包括:
和
其中,h(·)代表Jensen-Shannon分歧,m为所述点云P和Pt中标注点的数量,n为未标注点的数量。
2.根据权利要求1所述的语义分割方法,其特征在于,所述点云Pt与所述点云P中的点一一对应。
3.根据权利要求2所述的语义分割方法,其特征在于,所述步骤S2中包括如下获取所述点云Pt的步骤:
对所述点云P进行随机角度旋转得到点云Pr;
对所述点云Pr按照固定比例缩放得到点云Ps;
对所述点云Ps平移得到数据增强后的所述点云Pt。
4.根据权利要求1所述的语义分割方法,其特征在于,所述多尺度编解码网络包括多个编码层和多个解码层,所述步骤S1中,所述编码层采用最远点采样的方式对所述点云进行采样,并获得采样后的点云。
5.根据权利要求4所述的语义分割方法,其特征在于,所述步骤S1中,在进行采样后还包括:
基于每个采样点,采用球查询方式的寻找采样点邻域范围内的邻点Pneig,邻域范围由邻域半径r设定,r被设置为可学习参数;
对于每个邻域范围内的点,采用点Transformer的方式提取特征,所提取的特征表示为FPT,其中,FPT=PT(Pneig),PT表示点Transformer的方式;
采用混合池化的方式将特征FPT聚合到每个采样点得到聚合特征FA,公式如下:
其中ζ1为可调节参数,为邻域范围,j表示邻域范围中的第j点。
6.根据权利要求5所述的语义分割方法,其特征在于,所述步骤S1中,在得到每个采样点的聚合特征后还包括:
解码层通过线性插值的操作实现点云上采样以及特征回传;
通过跳跃连接拼接编码层和与编码层对应的解码层的特征,得到输出特征;
将所述输出特征输入到所述多尺度编解码网络的多层感知机,得到所述点云P的多尺度特征
将所述多尺度特征输入所述多尺度编解码网络的全连接层得到所述点云P中每个点的语义类别概率分布
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于集美大学;赛维时代科技股份有限公司,未经集美大学;赛维时代科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211409147.7/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种空气透平发电系统及其气流量调节方法
- 下一篇:一种注气双密封封隔器及方法