[发明专利]一种多模态特征融合的文本指导图像压缩噪声去除方法在审
| 申请号： | 202111537614.X | 申请日： | 2021-12-15 |
| 公开（公告）号： | CN114283080A | 公开（公告）日： | 2022-04-05 |
| 发明（设计）人： | 颜波;谭伟敏;姜旭浩;林青;马晨曦 | 申请（专利权）人： | 复旦大学 |
| 主分类号： | G06T5/00 | 分类号： | G06T5/00;G06T5/50;G06N3/04;G06N3/08 |
| 代理公司： | 上海正旦专利代理有限公司 31200 | 代理人： | 陆飞;陆尤 |
| 地址： | 200433 *** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明属于数字图像智能处理技术领域，具体为一种多模态特征融合的文本指导图像压缩噪声去除方法。本发明方法包括：模型以压缩图像和相应的文本描述作为输入，分别提取局部特征和全局特征；基于全局特征融合，模型利用文本全局特征增强图像全局特征，极大提升重建结果的全局质量；基于局部特征融合，模型利用文本局部特征增强图像局部特征，使重建结果具有更多细粒度纹理；在网络训练中引入重构损失、对抗损失、对比损失和语义一致损失来辅助模型生成更加真实、自然的结果。实验结果表明，本发明可以有效利用文本信息来辅助压缩图像的增强，生成自然美观且与未压缩图像语义一致的重建结果，有效解决图像压缩噪声去除的问题。 | ||
| 搜索关键词： | 一种 多模态 特征 融合 文本 指导 图像 压缩 噪声 去除 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于复旦大学，未经复旦大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202111537614.X/，转载请声明来源钻瓜专利网。
