[发明专利]人像分割方法、装置、电子设备及存储介质有效
申请号: | 202111045746.0 | 申请日: | 2021-09-07 |
公开(公告)号: | CN113487618B | 公开(公告)日: | 2022-03-08 |
发明(设计)人: | 赵景;高原;刘霄 | 申请(专利权)人: | 北京世纪好未来教育科技有限公司 |
主分类号: | G06T7/10 | 分类号: | G06T7/10;G06T7/194;G06N3/04;G06N3/08 |
代理公司: | 北京开阳星知识产权代理有限公司 11710 | 代理人: | 袁义科 |
地址: | 100089 北京市海淀区中*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 人像 分割 方法 装置 电子设备 存储 介质 | ||
1.一种人像分割方法,包括:
获取待分割图像;
利用预先训练的人像分割模型,提取所述待分割图像的浅层图像信息和深层图像信息,所述深层图像信息基于所述人像分割模型的轻量化网络提取得到;
基于所述浅层图像信息和所述深层图像信息,确定所述待分割图像的人像分割结果;
基于所述人像分割结果、所述待分割图像的前景图以及所述待分割图像的背景图,确定所述待分割图像的目标分割图像;
所述基于所述浅层图像信息和所述深层图像信息,确定所述待分割图像的人像分割结果,包括:
利用所述人像分割模型,对所述深层图像信息和所述浅层图像信息进行信息级联,得到级联特征图;
对所述级联特征图进行升采样,得到所述待分割图像的人像分割结果;
所述利用所述人像分割模型,对所述深层图像信息和所述浅层图像信息进行信息级联,得到级联特征图,包括:
对所述深层图像信息进行升采样处理,得到升采样的深层图像信息;
预测所述升采样的深层图像信息中各像素点的概率值;
基于所述各像素点的概率值和所述浅层图像信息,得到浅层特征图像;
对所述浅层特征图像和所述升采样的深层图像信息进行信息级联,得到所述级联特征图。
2.根据权利要求1所述的方法,其中,提取所述待分割图像的深层图像信息,包括:
利用所述人像分割模型的轻量化网络,对所述待分割图像的浅层图像信息进行降采样和膨胀卷积处理,得到所述深层图像信息。
3.根据权利要求2所述的方法,其中,所述利用所述人像分割模型的轻量化网络,对所述待分割图像的浅层图像信息进行降采样和膨胀卷积处理,得到所述深层图像信息,包括:
利用所述轻量化网络的第一轻量化子网络,对所述待分割图像的轮廓信息进行一次或多次降采样,得到降采样的浅层图像信息;
利用所述轻量化网络的第二轻量化子网络,对所述降采样的浅层图像信息进行膨胀卷积处理,得到所述深层图像信息。
4.根据权利要求2或3所述的方法,其中,所述利用所述人像分割模型的轻量化网络,对所述待分割图像的浅层图像信息进行降采样和膨胀卷积处理,得到所述深层图像信息,包括:
利用所述人像分割模型的轻量化网络,基于逐通道卷积和/或逐点卷积,对所述浅层图像信息进行降采样和膨胀卷积处理,得到所述深层图像信息。
5.根据权利要求1-3中任一项所述的方法,所述待分割图像包括待分割视频的多个图像帧;
其中,所述基于所述人像分割结果、所述待分割图像的前景图以及待分割图像的背景图,确定所述待分割图像的目标分割图像,包括:
确定相邻图像帧中像素点的偏移量,并基于各个像素点的偏移量生成偏移量图像;
基于所述相邻图像帧中的当前图像帧的前景图、所述当前图像帧的背景图以及所述当前图像帧的人像分割结果,确定当前图像帧对应的当前分割图像;
基于所述偏移量图像和所述当前图像帧对应的当前分割图像,得到所述当前图像帧对应的目标分割图像。
6.根据权利要求1-3中任一项所述的方法,其中,所述人像分割模型通过以下方式训练得到:
获取训练样本集,其中,所述训练样本集包括样本图像和所述样本图像的样本分割图像;
将所述样本图像输入至初始人像分割模型,确定所述样本图像的真实预测图像;
基于所述真实预测图像和所述样本分割图像,确定当前迭代次数下的初始人像分割模型的损失函数;
在所述损失函数的损失值小于或等于预设损失值的情况下,将所述当前迭代次数下的初始人像分割模型作为所述人像分割模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京世纪好未来教育科技有限公司,未经北京世纪好未来教育科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111045746.0/1.html,转载请声明来源钻瓜专利网。