[发明专利]稳定性评估方法、装置、电子设备和计算机可读存储介质有效
| 申请号: | 202010112749.0 | 申请日: | 2020-02-24 |
| 公开(公告)号: | CN111340101B | 公开(公告)日: | 2023-06-30 |
| 发明(设计)人: | 叶海佳;许佳 | 申请(专利权)人: | 广州虎牙科技有限公司 |
| 主分类号: | G06V10/776 | 分类号: | G06V10/776;G06T7/215;G06T7/269;G06T7/194 |
| 代理公司: | 北京超凡宏宇专利代理事务所(特殊普通合伙) 11463 | 代理人: | 张欣欣 |
| 地址: | 511400 广东省广州市番禺*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 稳定性 评估 方法 装置 电子设备 计算机 可读 存储 介质 | ||
本申请实施例提供一种稳定性评估方法、装置、电子设备和计算机可读存储介质,预先利用源视频中时间相邻的源图像计算得到源图像之间的光流信息,即变化信息。在利用分割模型得到各个源图像对应的分割图像之后,针对时间相邻的分割图像,利用预先得到该相邻的分割图像所对应的源图像的光流信息以及其中一帧分割图像,计算出预测分割图像。再将预测分割图像与实际得到的分割图像进行比对,从而得到分割稳定值。该方案利用分割之前源图像之间的光流信息进行分割图像的预测,再与基于分割模型真实得到的分割图像进行比对的方式,对分割模型的稳定性进行评估,有利于分割模型的优化。
技术领域
本申请涉及计算机技术领域,具体而言,涉及一种稳定性评估方法、装置、电子设备和计算机可读存储介质。
背景技术
在人像分割的处理过程中,一般较多地以人像分割的准确性作为评估指标。但是,当人像分割应用到视频流时,分割的准确性已不再是唯一衡量指标,此时,人像分割的稳定性也十分重要。由于视频流是以多帧时间连续的图像帧所组成,在利用分割模型对视频流的每一帧图像帧进行人像分割时,若相邻帧间的分割不稳定,分割结果相差较大,将导致视觉上的不连贯,影响分割图像的质量,因此,如何有效地检测分割的稳定性对于视频流人像分割任务十分重要。但是,目前视频分割稳定性的评估缺乏一种可靠地、可量化的评估方案,难以为分割模型的优化提供指导依据。
发明内容
本申请的目的包括,例如,提供了一种稳定性评估方法、装置、电子设备和计算机可读存储介质,以对分割模型的分割稳定性进行定量评估。
本申请的实施例可以这样实现:
第一方面,本申请实施例提供一种稳定性评估方法,所述方法包括:
将获得的源视频导入至预先建立的分割模型,输出所述源视频包含的各帧源图像对应的分割图像;
针对时间相邻的两帧分割图像,获取预先根据该两帧分割图像对应的两帧源图像计算得到的光流信息;
获取所述两帧分割图像中的其中一帧分割图像按所述光流信息变化后的预测分割图像,比对所述预测分割图像以及所述两帧分割图像中的另一帧分割图像,得到分割稳定值。
在可选的实施方式中,所述源视频中的各帧源图像包含人像,所述将获得的源视频导入至预先建立的分割模型,输出所述源视频包含的各帧源图像对应的分割图像的步骤,包括:
将获得的源视频导入至预先建立的分割模型,利用所述分割模型分割出各所述源图像中包含的人像区域以及背景区域,并以第一像素点标记所述人像区域,以第二像素点标记所述背景区域;
输出各所述源图像对应的标记后的包含人像区域和背景区域的分割图像。
在可选的实施方式中,所述光流信息包括后向光流信息,所述获取所述两帧分割图像中的其中一帧分割图像按所述光流信息变化后的预测分割图像,比对所述预测分割图像以及所述两帧分割图像中的另一帧分割图像,得到分割稳定值的步骤,包括:
获取所述时间相邻的两帧分割图像中时序靠前的分割图像;
根据所述时序靠前的分割图像的图像信息以及所述后向光流信息,计算得到所述时序靠前的分割图像按所述后向光流信息变化后的预测分割图像;
比对所述预测分割图像以及所述两帧分割图像中时序靠后的分割图像,得到分割稳定值。
在可选的实施方式中,所述光流信息包括后向光流信息,获取所述后向光流信息的步骤包括:
针对所述源视频包括的时间相邻的两帧源图像,获取其中时序靠前的源图像及时序靠后的源图像;
针对所述时序靠前的源图像中的每个像素点,计算该像素点变化至所述时序靠后的源图像中对应像素点的矢量信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州虎牙科技有限公司,未经广州虎牙科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010112749.0/2.html,转载请声明来源钻瓜专利网。





