[发明专利]图像处理方法、图像处理装置和存储介质在审

专利信息
申请号: 202111653638.1 申请日: 2021-12-30
公开(公告)号: CN114359092A 公开(公告)日: 2022-04-15
发明(设计)人: 不公告发明人 申请(专利权)人: 上海壁仞智能科技有限公司
主分类号: G06T5/00 分类号: G06T5/00;G06T9/00;G06N3/04;G06N3/08
代理公司: 北京市柳沈律师事务所 11105 代理人: 彭久云;罗莎
地址: 201100 上海市闵行区*** 国省代码: 上海;31
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 处理 方法 装置 存储 介质
【权利要求书】:

1.一种图像处理方法,包括:

获取输入图像;

利用图像重建网络对所述输入图像进行N次重建操作,以得到所述输入图像对应的重建图像,

其中,N为大于等于1的正整数,

所述图像重建网络包括编码子网络、解码子网络和连接子网络,

所述编码子网络包括至少一个编码块,每个编码块包括多个自注意力算子,

所述解码子网络包括至少一个解码块,每个解码块包括多个自注意力算子,

所述连接子网络包括连接层,

所述至少一个编码块中的一个编码块与所述至少一个解码块中的一个解码块通过所述连接层映射连接,

其中,每次重建操作包括:

通过所述编码子网络对所述编码子网络的输入进行特征提取处理,以得到第一特征图和所述至少一个编码块的输出;

利用所述解码子网络和所述连接子网络对所述第一特征图和所述至少一个编码块的输出进行处理,以得到所述解码子网络的输出。

2.根据权利要求1所述的图像处理方法,其中,所述图像重建网络还包括瓶颈层,

其中,在所述图像重建网络包括所述瓶颈层的情况下,每次重建操作包括:

通过所述编码子网络对所述编码子网络的输入进行特征提取处理,以得到所述第一特征图和所述至少一个编码块的输出;

利用所述瓶颈层对所述第一特征图进行处理,以得到第二特征图;

利用所述解码子网络和所述连接子网络对所述第二特征图和所述至少一个编码块的输出进行处理,以得到所述解码子网络的输出。

3.根据权利要求2所述的图像处理方法,其中,所述瓶颈层包括多个自注意力算子,

利用所述瓶颈层对所述第一特征图进行处理,以得到第二特征图,包括:

利用所述瓶颈层的多个自注意力算子对所述第一特征图进行表示学习,以得到所述第二特征图。

4.根据权利要求3所述的图像处理方法,其中,所述瓶颈层的多个自注意力算子包括依次交替连接的基于窗口的自注意力算子和基于移动窗口的自注意力算子,

所述瓶颈层中的基于窗口的自注意力算子的数量比基于移动窗口的自注意力算子的数量多1。

5.根据权利要求1-4中任一项所述的图像处理方法,其中,

当N为1,对于所述N次重建操作,所述编码子网络的输入为所述输入图像,所述解码子网络的输出为所述重建图像,

当N大于1,对所述N次重建操作中的第i次重建操作中所述解码子网络的输出进行数据拟合处理和数据修正处理,以得到所述N次重建操作中的第i+1次重建操作中所述编码子网络的输入,i为正整数且小于N,

i为1时,所述第i次重建操作中所述编码子网络的输入为所述输入图像,i为N-1时,所述第i+1次重建操作中所述解码子网络的输出为所述重建图像。

6.根据权利要求2-4中任一项所述的图像处理方法,其中,所述连接子网络包括至少一个连接层,所述至少一个编码块与所述至少一个解码块通过所述至少一个连接层一一对应映射连接,

每个所述连接层用于将具有相同尺寸特征的编码块和解码块进行映射连接。

7.根据权利要求1-4中任一项所述的图像处理方法,其中,所述解码子网络还包括线性投影层,所述至少一个编码块包括依次连接的多个编码块,所述至少一个解码块包括依次连接的多个解码块,所述连接子网络包括多个连接层,

所述多个编码块与所述多个解码块通过所述多个连接层一一对应映射连接,

每个所述连接层用于将所述连接层对应的编码块的输出和所述连接层对应的解码块的输出进行连接处理,

所述连接层的输出作为所述连接层对应的解码块所连接的下一个解码块的输入或者所述连接层的输出作为所述线性投影层的输入。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海壁仞智能科技有限公司,未经上海壁仞智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111653638.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top