[发明专利]图像补全方法及装置

权利要求书

1.一种图像补全方法，其特征在于，包括：

获取当前正在播放的视频图像帧；

获取第i帧图像中待补全的标识区域；所述待补全的标识区域包括特定类标识；所述i是大于1的整数；

获取所述第i帧之前的前m帧图像中已补全的m个标识区域；所述m大于1且小于i；

根据所述已补全的m个标识区域，补全所述待补全的标识区域中的特定类标识；

所述根据所述已补全的m个标识区域，补全所述待补全的标识区域中的特定类标识包括：

将所述特定类标识从所述待补全的标识区域中抠除，得到第i帧抠图；

按照预设规则，逐层下采样所述第i帧抠图，直到第n层第一下采样图的各个像素都是非空，得到所述n层第一下采样图；所述n是整数；

按照所述预设规则，逐层下采样所述已补全的m个标识区域，得到每个已补全的标识区域的n层第二下采样图；

根据所述每个已补全的标识区域的n层第二下采样图和所述n层第一下采样图，逆序逐层补全所述n层第一下采样图，所述n是大于或等于0的整数；

其中，所述第0层第一下采样图是所述第i帧抠图；已补全的第0层第一下采样图是已补全的第i帧抠图；

所述将所述特定类标识的像素从第i帧图像中抠除，得到第i帧抠图包括：

获取所述特定类标识占所述待补全的标识区域的面积比率；

当所述面积比率大于预设阈值时，将所述特定类标识从所述待补全的标识区域中抠除，得到所述第i帧抠图；

当所述面积比率小于或等于所述预设阈值时，通过图像修复inpainting算法补全所述待补全的标识区域。

2.根据权利 要求1所述的方法，其特征在于，对于第j层，所述根据所述每个已补全的标识区域的n层第二下采样图和所述n层第一下采样图，逆序逐层补全所述n层第一下采样图中的标识区域包括：

获取第j已补全图像；所述第j已补全图是已补全的第j层第一下采样图；

对所述第j已补全图像进行上采样，得到第j-1图像；

根据块匹配算法，从所述第j-1图像、所述每个已补全的标识区域的第j-1层第二下采样图中匹配出与所述第j-1层下采样图的标识区域最相似的匹配区域；

用所述匹配区域、第j-1图像补全所述第j-1层第一下采样图，得到第j-1已补全图像。

3.根据权利要求1所述的方法，其特征在于，所述获取第i帧图像中待补全的标识区域，包括：

通过预设分类模型，分别检测出视频的每一帧图像中对应的标识区域；

其中，所述预设分类模型是通过样本训练出来的。

4.一种图像补全装置，其特征在于，包括：

第一获取模块，用于获取当前正在播放的视频图像帧；

第二获取模块，用于获取第i帧图像中待补全的标识区域；所述待补全的标识区域包括特定类标识；所述i是大于1的整数；

第三获取模块，用于获取所述第i帧之前的前m帧图像中已补全的m个标识区域；所述m大于1且小于i；

补全模块，用于根据所述已补全的m个标识区域，补全所述待补全的标识区域中的特定类标识；

所述补全模块包括：

扣除子模块，用于将所述特定类标识从所述待补全的标识区域中抠除，得到第i帧抠图；

第一下采样子模块，用于按照预设规则，逐层下采样所述第i帧抠图，直到第n层第一下采样图的各个像素都是非空，得到所述n层第一下采样图；所述n是整数；

第二下采样子模块，用于按照所述预设规则，逐层下采样所述已补全的m个标识区域，得到每个已补全的标识区域的n层第二下采样图；

补全子模块，用于根据所述每个已补全的标识区域的n层第二下采样图和所述n层第一下采样图，逆序逐层补全所述n层第一下采样图，所述n是大于或等于0的整数；

其中，所述第0层第一下采样图是所述第i帧抠图；已补全的第0层第一下采样图是已补全的第i帧抠图；

所述扣除子模块用于：

获取所述特定类标识占所述待补全的标识区域的面积比率；

当所述面积比率大于预设阈值时，将所述特定类标识从所述待补全的标识区域中抠除，得到所述第i帧抠图；

当所述面积比率小于或等于所述预设阈值时，通过图像修复inpainting算法补全所述待补全的标识区域。