[发明专利]一种基于多模态聚合的磁共振图像重建方法及装置

权利要求书

1.一种基于多模态聚合的磁共振图像重建方法，其特征在于，所述方法应用于从全采样的辅助模态图像和欠采样的目标模态图像中重建出无混叠伪影的目标模态图像，所述方法包括：

获取样本图像和图像处理网络；其中，所述样本图像包括样本组织经T1加权成像生成的全采样第一样本图像，所述样本组织经T2加权成像生成的全采样第二样本图像，以及所述样本组织经T2加权成像生成的欠采样第二样本图像；所述图像处理网络包括频域处理网络和图像域处理网络；

通过所述频域处理网络对所述全采样第一样本图像和所述欠采样第二样本图像进行处理，获得频域重建结果，并依据所述频域重建结果和所述全采样第二样本图像，确定对应于所述频域处理网络的频域损失函数；

通过所述图像域处理网络对所述频域重建结果进行处理，获得图像域重建结果，并依据所述图像域重建结果和所述全采样第二样本图像，确定对应于所述图像域处理网络的图像域损失函数；

依据所述频域损失函数和所述图像域损失函数对所述图像处理网络进行训练，生成从全采样的辅助模态图像和欠采样的目标模态图像中重建出无混叠伪影的目标模态图像的混合域学习网络；

获取目标组织经T1加权成像生成的全采样第一目标图像和所述目标组织经T2加权成像生成的欠采样第二目标图像；

通过所述混合域学习网络对所述全采样第一目标图像和所述欠采样第二目标图像进行处理，生成无伪影第二目标图像；其中，所述无伪影第二目标图像为去除混叠伪影后的所述欠采样第二目标图像。

2.根据权利要求1所述的磁共振图像重建方法，其特征在于，所述频域处理网络包括第一频域处理层、第一重建引导层和第二频域处理层；所述频域重建结果包括对应于所述全采样第一样本图像的第一频域信号和对应于所述欠采样第二样本图像的第二频域信号；

所述通过所述频域处理网络对所述全采样第一样本和所述欠采样第二样本图像进行处理，获得所述频域重建结果的步骤，包括：

将所述全采样第一样本图像输入所述第一频域处理层，获得所述第一频域信号；

将所述全采样第一样本图像和所述欠采样第二样本图像输入所述第一重建引导层，获得用于指导所述欠采样第二样本图像在所述第二频域处理层上重建的第一注意力模块；

将所述第一注意力模块和所述欠采样第二样本图像输入所述第二频域处理层，获得所述第二频域信号。

3.根据权利要求2所述的磁共振图像重建方法，其特征在于，所述第一重建引导层包括第一模态调制层和第一指导融合层；

所述将所述全采样第一样本图像和所述欠采样第二样本图像输入所述第一重建引导层，获得用于指导所述欠采样第二样本图像在所述第二频域处理层上重建的第一注意力模块的步骤，包括：

将所述全采样第一样本图像输入所述第一模态调制层，获得包含所述全采样第一样本图像的关键特征信息的第一空间注意力模块；

将所述第一空间注意力模块和所述欠采样第二样本图像输入所述第一指导融合层，获得所述第一注意力模块。

4.根据权利要求3所述的磁共振图像重建方法，其特征在于，所述第一模态调制层包括第一通道调制层和第一空间调制层；

所述将所述全采样第一样本图像输入所述第一模态调制层，获得包含所述全采样第一样本图像的关键特征信息的第一空间注意力模块的步骤，包括：

将所述全采样第一样本图像输入所述第一通道调制层，获得包含所述全采样第一样本图像的低维特征信息的第一通道注意力模块；

将所述第一通道注意力模块输入所述第一空间调制层，获得所述第一空间注意力模块。