[发明专利]无参考图像质量检测方法、系统、终端及介质有效

专利信息
申请号: 202110335896.9 申请日: 2021-03-29
公开(公告)号: CN113066065B 公开(公告)日: 2023-08-04
发明(设计)人: 杨晓东;刘立庄;韩振奇;赵丹 申请(专利权)人: 中国科学院上海高等研究院
主分类号: G06T7/00 分类号: G06T7/00;G06V10/80;G06V10/774;G06V10/82;G06N3/045;G06N3/0464;G06N3/08
代理公司: 上海光华专利事务所(普通合伙) 31219 代理人: 倪静
地址: 201210 *** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 参考 图像 质量 检测 方法 系统 终端 介质
【说明书】:

发明的无参考图像质量检测方法、系统、终端及介质,通过将所述待评价图像输入至经过训练的无参考图像质量检测模型,以获得所述待评价图像的质量检测结果;其中模型由骨干网络模型和双通道卷积网络模型级联组成,该模型结构不仅能够充分挖掘图像特征还充分融合了多层次的语义特征,增强了特征表达的多样性以及特征的自适应性。本发明的方案提取的质量特征更加有效,主客观一致性更加优越,模型泛化能力更强,在预测准确率和复杂度上也能够较好地平衡,进而解决现有技术中在模型复杂度适中的前提下,无法提高质量分数预测的准确性的问题。

技术领域

本申请涉及客观图像质量评价技术领域,尤其涉及无参考图像质量检测方法、系统、终端及介质。

背景技术

随着人类对高质量图像的需求日益紧迫,客观图像质量评价的研究日趋重要。图像在产生、传输、处理和存储的过程中会产生各种失真,会极大地影响观察者的主观舒适度和其他视觉任务的准确率。根据参考标准图像的程度,客观图像质量评价方法可分为三种:全参考型、半参考型和无参考型。由于实际场景的参考图像较难获取,无参考方法为主要研究方向。无参考方法是学习待评价图像本身特征到主观质量的映射关系,不利用参考图像的任何信息,面临失真复杂性和内容依赖性的挑战。对于自然统计特征的研究,有空域熵和梯度、频域熵和小波域等特征,例如BIQ、NIQE、BRISQUE和SSEQ等方法,典型的是高阶统计量聚合方法HOSA,其性能在传统方法中具有竞争力。基于深度学习的评价方法研究,一般是利用其他任务的深层语义特征作为先验知识辅助学习,典型图像质量评价的卷积网络模型有DeepBIQ,RankIQA,BPSQM,MetaIQA,HyperIQA,Koncept512,LineartyIQA等方法,其中LineartyIQA性能较好,设计了NINLoss取主客观分数归一化的差值范数,能够加快收敛,但模型复杂度过高。自然统计特征方法有局限性且准确率低,深度学习方法虽然性能提升较大,但多数的质量特征表达还不够充分有效。

发明内容

鉴于以上所述现有技术的缺点,本申请的目的在于提供无参考图像质量检测方法、系统、终端及介质,解决现有技术中在模型复杂度适中的前提下,无法提高质量分数预测的准确性的问题。

为实现上述目标及其他相关目标,本申请提供一种无参考图像质量检测方法,包括:获取待评价图像;将所述待评价图像输入至经过训练的无参考图像质量检测模型,以获得所述待评价图像的质量检测结果;其中,所述图像质量评价模型的网络结构包括:相互级联的骨干网络结构以及双通道卷积网络结构;所述骨干网络结构用于对输入的待评价图像提取图像质量特征,并输出特征图;所述双通道卷积网络结构用于对输入的特征图进行双通道卷积计算,并输出对应所述特征图的质量检测结果。

于本申请的一或多个实施例中,所述无参考图像质量检测模型的训练过程包括:利用训练数据集训练所述无参考图像质量检测模型;其中,所述训练数据集包括:一或多个样本图像以及对应各样本图像的质量评价标签;并且其中,所述质量评价标签包括:质量评价等级和/或主观质量得分。

于本申请的一或多个实施例中,所述双通道卷积网络结构包括:密集哈达玛卷积通道,用于对输入的特征图进行密集哈达玛卷积计算,并输出获得第一特征向量;多层卷积通道,用于对输入的特征图进行多层卷积计算,并输出获得第二特征向量;融合结构,连接所述密集哈达玛卷积通道以及多层卷积通道,用于将所述第一特征向量以及第二特征向量进行多维拼接,并映射获得质量检测结果。

于本申请的一或多个实施例中,所述密集哈达玛卷积通道包含依次连接的全局平均池化层、3个全连接层和用于密集哈达玛卷积的密集哈达玛卷积模块;其中,所述密集哈达玛卷积模块包括:至少一个对应一变换权重的哈达玛卷积层,用于通过哈达玛乘积对由所述全连接层输出的特征向量进行权重变换。

于本申请的一或多个实施例中,所述密集哈达玛卷积模块包括:依次连接的三个Dendrite Net层,用于对所述全连接输出的特征向量依次进行对应各Dendrite Net层的三个权重矩阵的变换,以输出所述第一特征向量。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院上海高等研究院,未经中国科学院上海高等研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110335896.9/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top