[发明专利]基于类激活热力图的图像篡改检测与定位的方法及系统在审
申请号: | 202111074784.9 | 申请日: | 2021-09-14 |
公开(公告)号: | CN113792789A | 公开(公告)日: | 2021-12-14 |
发明(设计)人: | 李向阳;汪俊军;张兰 | 申请(专利权)人: | 中国科学技术大学 |
主分类号: | G06K9/62 | 分类号: | G06K9/62;G06N3/04 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 钱娜 |
地址: | 230026 安*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 激活 力图 图像 篡改 检测 定位 方法 系统 | ||
本发明公开了一种基于类激活热力图的图像篡改检测与定位的方法及系统,方法包括:基于COCO数据集,使用图像修复的算法构造物体消去,拼接以及复制‑粘贴的图像篡改数据集;基于构造的卷积神经网络对图像篡改数据集进行图像篡改检测,得到图像篡改数据集的图像篡改分类结果;针对图像篡改分类结果,基于模型可解释性的方法找出图像中影响分类结果的像素并生成类激活热力图,使用ResNet50网络生成最终的篡改定位区域。本发明能够更加有效的实现对不同的篡改方式实现篡改检测与定位,特别是对基于各种图像修复算法的物体消除篡改方式的检测,使得篡改检测与定位具有更好的泛化能力。
技术领域
本发明涉及多媒体信息安全技术领域,尤其涉及一种基于类激活热力图的图像篡改检测与定位的方法及系统。
背景技术
随着多媒体采集设备的快速发展和使用,人们迎来了多媒体信息爆炸的时代,几乎人人都有能力制作、传递大量的数字图像。与此同时,Photoshop、美图秀秀、美颜相机等图像编辑软件操作简单,导致了图像修改变得越来越容易,普通人也能很轻易地对图像进行加工和修改,并且随着技术的发展,伪造图像也变得越来越不易察觉,甚至能够以假乱真。在当今社会,所谓的“眼见为实”已经变得越来越不可信,当人们面对一张图像的时候,往往首先对图像的真实性存在怀疑。日常生活中人们对图像进行修改,往往是出于美化、娱乐的目的,这并不会带来不良影响,但是在有些情况下,被恶意篡改的图像经过传播,就会影响人们对客观事物的判断,有时甚至会对社会和国家造成不良的影响,因此,如何既准确又高效的检测数字图像是否被篡改并检测出篡改区域,对图像取证任务具有重要意义。
目前图像内容的篡改方式主要分为拼接,复制-粘贴和基于图像修复的物体消去,这些操作会破坏原始图像的纹理和模式噪声,留下篡改痕迹,故可通过比较图像中特定指纹信息的不一致性或分析该图像中的某种统计特征是否被破坏来判断图像是否经过篡改并检测出篡改区域。目前图像篡改检测算法大致可以分为传统算法和深度学习算法,传统算法的特点是手工提取特征、建立模型、分析特征并分类,但传统方法通常都是采用手工设计的方式提取特征,这种基于手工设计的特征大多存在局限性,缺乏代表性,无法根据这些特征同时对多种篡改方式进行判定;深度学习的算法主要通过使用卷积神经网络模型,提取特征再分类,实现端到端自适应学习模式。但是目前的图像篡改检测算法大多只能针对一种或几种修改方式,特别是随着深度学习在图像修复领域的应用,基于图像修复的物体消除方式的修改方式检测起来更加困难。
因此,如何更加有效的对不同篡改方式实现篡改检测与定位,特别是基于各种图像修复算法的物体消除篡改方式的检测,以使篡改检测与定位具有更好的泛化能力,是一项亟待解决的问题。
发明内容
有鉴于此,本发明提供了一种基于类激活热力图的图像篡改检测与定位的方法,能够更加有效的实现对不同的篡改方式实现篡改检测与定位,特别是对基于各种图像修复算法的物体消除篡改方式的检测,使得篡改检测与定位具有更好的泛化能力。
本发明提供了一种基于类激活热力图的图像篡改检测与定位的方法,包括:
基于COCO数据集,使用图像修复的算法构造物体消去,拼接以及复制-粘贴的图像篡改数据集;
基于构造的卷积神经网络对所述图像篡改数据集进行图像篡改检测,得到所述图像篡改数据集的图像篡改分类结果;
针对所述图像篡改分类结果,基于模型可解释性的方法找出图像中影响分类结果的像素并生成类激活热力图,使用ResNet50网络生成最终的篡改定位区域。
优选地,所述基于构造的卷积神经网络对所述图像篡改数据集进行图像篡改检测,得到所述图像篡改数据集的图像篡改分类结果,包括:
使用所述卷积神经网络对所述图像篡改数据集进行增强处理;
对增强处理后的图像篡改数据集进行特征提取;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学技术大学,未经中国科学技术大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111074784.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种检测方法及装置
- 下一篇:一种基于定量化组合玻璃替换的光学系统无热化方法
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序