[发明专利]一种实时人物视频去背景的方法和系统在审
| 申请号: | 202011132128.5 | 申请日: | 2020-10-22 |
| 公开(公告)号: | CN112258384A | 公开(公告)日: | 2021-01-22 |
| 发明(设计)人: | 不公告发明人 | 申请(专利权)人: | 北京中科深智科技有限公司 |
| 主分类号: | G06T3/00 | 分类号: | G06T3/00;G06T7/194;H04N5/272;H04N5/265 |
| 代理公司: | 暂无信息 | 代理人: | 暂无信息 |
| 地址: | 100000 北京市丰台区航*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 实时 人物 视频 背景 方法 系统 | ||
1.一种实时人物视频去背景的方法,其特征在于,包括以下内容:
实时获取视频流;
实时对视频流中的图像进行预处理;
实时运行预先训练好的学生模型,以将图像中的人物轮廓图像抠出与预设虚拟图像融合,形成并显示融合图像,并更新学生模型;
与学生模型异步运行教师模型,以对视频流进行在线蒸馏,并根据蒸馏结果更新学生模型。
2.根据权利要求1所述一种实时人物视频去背景的方法,其特征在于,所述实时对视频流中的图像进行预处理,其中,预处理包括缩小图像尺寸,以及对图像做张量处理。
3.根据权利要求1所述一种实时人物视频去背景的方法,其特征在于,所述实时运行预先训练好的学生模型,以将图像中的人物轮廓图像抠出与预设虚拟图像融合,形成并显示融合图像,并更新学生模型,包括以下内容:
实时运行预先训练好的学生模型,根据预设掩码面积阈值判断图像中是否存在人物轮廓图像,若不存在,则输出纯背景图像,并更新学生模型,若存在人物轮廓图像,则将人物轮廓图像抠出与预设虚拟图像融合,形成并显示融合图像,并更新学生模型。
4.根据权利要求1所述一种实时人物视频去背景的方法,其特征在于,所述实时运行预先训练好的学生模型,以将图像中的人物轮廓图像抠出与预设虚拟图像融合,形成并显示融合图像,并更新学生模型,其中:
根据损失函数和优化算法预先训练学生模型。
5.一种实时人物视频去背景的系统,其特征在于,包括:
获取模块,用于实时获取视频流;
处理模块,用于实时对视频流中的图像进行预处理;
执行模块,用于实时运行预先训练好的学生模型,以将图像中的人物轮廓图像抠出与预设虚拟图像融合,形成并显示融合图像,并更新学生模型;
蒸馏模块,用于与学生模型异步运行教师模型,以对视频流进行在线蒸馏,并根据蒸馏结果更新学生模型。
6.根据权利要求5所述一种实时人物视频去背景的系统,其特征在于,所述处理模块包括:
尺寸处理模块,用于缩小图像尺寸;
张量处理模块,用于对图像做张量处理。
7.根据权利要求5所述一种实时人物视频去背景的系统,其特征在于,所述执行模块包括:
运行模块,用于实时运行预先训练好的学生模型;
判断模块,用于根据预设掩码面积阈值判断图像中是否存在人物轮廓图像;
执行子模块,用于当不存在人物轮廓图像时,输出纯背景图像,并更新学生模型,以及当存在人物轮廓图像时,将人物轮廓图像抠出与预设虚拟图像融合,形成并显示融合图像,并更新学生模型。
8.根据权利要求5所述一种实时人物视频去背景的系统,其特征在于,所述执行模块包括:
训练模块,用于根据损失函数和优化算法预先训练学生模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中科深智科技有限公司,未经北京中科深智科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011132128.5/1.html,转载请声明来源钻瓜专利网。





