[发明专利]实时无绿幕抠图方法、电子设备和存储介质在审
申请号: | 202110834274.0 | 申请日: | 2021-07-23 |
公开(公告)号: | CN113284156A | 公开(公告)日: | 2021-08-20 |
发明(设计)人: | 程文波;陈中师;陈以朋 | 申请(专利权)人: | 杭州星犀科技有限公司 |
主分类号: | G06T7/12 | 分类号: | G06T7/12;G06N3/04;G06N3/08;H04M1/72439 |
代理公司: | 杭州创智卓英知识产权代理事务所(普通合伙) 33324 | 代理人: | 张超 |
地址: | 311100 浙江省杭州市余杭*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 实时 无绿幕抠图 方法 电子设备 存储 介质 | ||
1.一种实时无绿幕抠图方法,其特征在于,应用于移动端,所述方法包括以下步骤:
对背景图和原图经过下采样降低分辨率后输入主干网络,生成特征图;
对所述特征图分别通过局部特征提取网络和全局特征提取网络处理目标对象的细节部分和整体,并将处理后的特征图合并,生成双边网格;
对所述原图通过引导网络生成灰度引导图;
对所述双边网格和所述灰度引导图进行切片操作生成透明通道;
根据所述透明通道和所述原图生成前景图。
2.根据权利要求1所述方法,其特征在于,所述主干网络包括MobileNetV3网络,所述对背景图和原图经过下采样降低分辨率后输入主干网络,生成特征图的步骤包括:
对所述背景图和所述原图经过下采样降低分辨率后输入所述MobileNetV3网络,生成所述特征图。
3.根据权利要求1所述方法,其特征在于,所述局部特征提取网络包括至少一层卷积网络,所述全局特征提取网络包括至少一层卷积网络和至少一层全连接的网络,所述对所述特征图分别通过局部特征提取网络和全局特征提取网络处理目标对象的细节部分和整体的步骤包括:
对所述特征图通过所述至少一层卷积网络学习所述目标对象的边缘细节部分,得到表征所述目标对象边缘细节的特征图;
对所述特征图通过包含的所述至少一层卷积网络和所述至少一层全连接的网络学习所述目标对象的整体,得到表征所述目标对象整体的特征图。
4.根据权利要求3所述方法,其特征在于,所述将处理后的特征图合并,生成双边网格的步骤包括:
将表征所述目标对象整体的特征图通过变形重组处理成与表征所述目标对象边缘细节的特征图的尺寸一致,再拼合起来生成第一尺寸的特征图;
将所述第一尺寸的特征图经过所述至少一层卷积处理生成第二尺寸的特征图。
5.根据权利要求4所述方法,其特征在于,所述引导网络包括逐点卷积网络,所述对所述原图通过引导网络生成灰度引导图的步骤包括:
通过所述逐点卷积网络对所述原图进行学习,得到与所述原图大小相同的灰度引导图。
6.根据权利要求5所述方法,其特征在于,所述对所述双边网格和所述灰度引导图进行切片操作生成透明通道的步骤包括:
通过仿射变换将所述双边网格应用到所述灰度引导图上。
7.根据权利要求1至5中任一项所述方法,其特征在于,所述对所述双边网格和所述灰度引导图进行切片操作生成透明通道的步骤包括:
在所述灰度引导图中依据所述双边网格的参数推理所述目标对象的图像。
8.根据权利要求7所述方法,其特征在于,所述根据所述透明通道和所述原图生成前景图的步骤包括:
将所述透明通道和所述原图进行相乘操作生成所述前景图。
9.一种电子设备,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为运行所述计算机程序以执行权利要求1至8中任一项所述的实时无绿幕抠图方法。
10.一种存储介质,其特征在于,所述存储介质中存储有计算机程序,其中,所述计算机程序被设置为运行时执行权利要求1至8中任一项所述的实时无绿幕抠图方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州星犀科技有限公司,未经杭州星犀科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110834274.0/1.html,转载请声明来源钻瓜专利网。