[发明专利]一种基于局部-全局信息协作的大脑医学图像配准方法及系统在审
申请号: | 202310321851.5 | 申请日: | 2023-03-29 |
公开(公告)号: | CN116309754A | 公开(公告)日: | 2023-06-23 |
发明(设计)人: | 舒禹程;袁鸣棋;肖斌;李伟生 | 申请(专利权)人: | 重庆邮电大学 |
主分类号: | G06T7/33 | 分类号: | G06T7/33;G06V10/25;G06V10/77;G06V10/80;G06V10/82 |
代理公司: | 重庆辉腾律师事务所 50215 | 代理人: | 王海军 |
地址: | 400065 重*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 局部 全局 信息 协作 大脑 医学 图像 方法 系统 | ||
1.一种基于局部-全局信息协作的大脑医学图像配准方法,其特征在于,包括:获取待配准的大脑医学图像,将待配准的大脑医学图像输入到训练好的大脑医学图像配准模型中,得到翘曲图像;
大脑医学图像配准模型的训练过程包括:
S1:获取用于训练的大脑医学图像并对其进行预处理,得到移动图像和固定图像;
S2:在通道维度拼接移动图像和固定图像,得到拼接图像;
S3:将拼接图像输入到全局自注意力关系网络中进行处理,得到第一形变场;
S4:将拼接图像输入到局部结构特征网络中进行处理,得到第二形变场;
S5:将第一形变场和第二形变场逐像素按位相加,得到最终形变场;
S6:根据最终形变场采用空间变换网络对移动图像进行翘曲,得到翘曲图像;
S7:根据翘曲图像和固定图像计算网络的损失函数,根据损失函数调整模型参数,得到训练好的大脑医学图像配准模型。
2.根据权利要求1所述的一种基于局部-全局信息协作的大脑医学图像配准方法,其特征在于,对大脑医学图像进行预处理的过程包括:对大脑医学图像进行仿射配准、灰度归一化操作,将仿射配准、灰度归一化后的图像裁剪到统一尺寸;从裁剪后的图像中随机选取部分图像作为移动图像,剩余的图像为固定图像。
3.根据权利要求1所述的一种基于局部-全局信息协作的大脑医学图像配准方法,其特征在于,拼接图像在全局自注意力关系网络中的处理过程包括:对拼接图像进行分块嵌入处理,得到多个图像块;将多个图像块依次输入四个编码器中进行处理,前一个编码器的输出为下一个编码器的输入,得到四个不同尺寸的编码器特征图;对四个不同尺寸的编码器特征图依次进行三线性插值上采样处理得到四个与编码器特征图尺寸相同的特征图即还原特征图;同时采用多尺度特征融合模块对四个编码器特征图和还原特征图进行融合,得到第一形变场。
4.根据权利要求3所述的一种基于局部-全局信息协作的大脑医学图像配准方法,其特征在于,编码器对图像块的处理过程包括:将图像块进行线性操作分解为Q、K、V三组特征向量,将Q和K的转置进行点积后再进行归一化处理,最后通过Softmax激活函数处理得到置信度矩阵;将置信度矩阵点乘V得到加权特征图,采用多层感知器对加权特征图进行激活,输出编码器特征图。
5.根据权利要求3所述的一种基于局部-全局信息协作的大脑医学图像配准方法,其特征在于,多尺度特征融合模块对四个编码器特征图和还原特征图进行融合的过程包括:对四个编码器特征图分别进行卷积处理,得到四个第一特征图,在通道维度拼接这四个第一特征图,得到拼接特征图;对拼接特征图分别进行最大池化操作和平均池化操作,得到拼接特征图的最大池化特征图和平均池化特征图;采用多层感知机分别对拼接特征图的最大池化特征图和平均池化特征图进行处理,拼接处理后的图像并使用激活函数进行激活,得到第二特征图;融合第二特征图和编码器特征图,得到四个融合特征图;拼接融合特征图和还原特征图,利用卷积操作处理拼接后的特征图,得到第一形变场。
6.根据权利要求1所述的一种基于局部-全局信息协作的大脑医学图像配准方法,其特征在于,拼接图像在局部结构特征网络中的处理过程包括:将拼接图像依次输入到四个卷积层中进行处理,前一个卷积层的输出为下一个卷积层的输入,得到四个尺寸不同的语义特征;采用解码器分别对四个尺寸不同的语义特征进行处理,得到四个尺度还原的语义特征;采用多尺度特征融合模块对四个尺度还原的语义特征和原尺度语义特征进行融合,得到第二形变场;其中,解码器包括卷积层和三线性插值上采样层。
7.根据权利要求1所述的一种基于局部-全局信息协作的大脑医学图像配准方法,其特征在于,计算网络的损失函数的过程包括为:计算翘曲图像和固定图像的相似度;构建形变场的正则化约束函数;根据相似度和正则化约束函数计算网络的损失函数。
8.一种基于局部-全局信息协作的大脑医学图像配准系统,其特征在于,包括:预处理模块、图像拼接模块、全局自注意力关系网络模块、局部结构特征网络模块、形变场融合模块和配准模块;
所述预处理模块用于对待配准的图像进行预处理,得到移动图像和固定图像;
所述图像拼接模块用于拼接移动图像和固定图像,得到拼接图像;
所述全局自注意力关系网络模块用于根据拼接图像获取第一形变场;
所述局部结构特征网络模块用于根据拼接图像获取第二形变场;
所述形变场融合模块用于融合第一形变场和第二形变场,得到最终形变场;
所述配准模块用于根据最终形变场对图像进行配准,输出翘曲图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆邮电大学,未经重庆邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310321851.5/1.html,转载请声明来源钻瓜专利网。
- 信息记录介质、信息记录方法、信息记录设备、信息再现方法和信息再现设备
- 信息记录装置、信息记录方法、信息记录介质、信息复制装置和信息复制方法
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录装置、信息再现装置、信息记录方法、信息再现方法、信息记录程序、信息再现程序、以及信息记录介质
- 信息记录设备、信息重放设备、信息记录方法、信息重放方法、以及信息记录介质
- 信息存储介质、信息记录方法、信息重放方法、信息记录设备、以及信息重放设备
- 信息存储介质、信息记录方法、信息回放方法、信息记录设备和信息回放设备
- 信息记录介质、信息记录方法、信息记录装置、信息再现方法和信息再现装置
- 信息终端,信息终端的信息呈现方法和信息呈现程序
- 信息创建、信息发送方法及信息创建、信息发送装置