[发明专利]基于显微镜的超分辨率方法、装置、设备及介质

说明书

本申请公开了一种基于显微镜的超分辨率方法、装置、设备及介质，涉及图像处理领域。该方法包括：从第一分辨率的显微镜图像序列中获取待测图像和至少两张辅助图像，所述待测图像包含目标区域，所述辅助图像的显示区域与所述目标区域存在重叠区域；将所述待测图像和所述辅助图像进行配准，得到配准图像；从所述配准图像中提取高分辨率特征，所述高分辨率特征用于表示所述目标区域在第二分辨率的情况下的图像特征，所述第二分辨率大于所述第一分辨率；重建所述高分辨率特征，得到与所述待测图像对应的所述第二分辨率的目标图像。本申请会对显微镜图像序列进行处理，获得效果较好的高分辨图像。

技术领域

本申请涉及图像处理领域，特别涉及一种基于显微镜的超分辨率方法、装置、设备及介质。

背景技术

在处理显微镜图像时，超分辨率是一种常用的方法。超分辨率是指通过硬件或软件的方法提高原有图像的分辨率，比如，在医疗技术领域，由一幅低分辨率的显微镜图像或显微镜图像序列恢复出相应的高分辨率的显微镜图像。

相关技术是通过超分辨率模型实现的，超分辨率模型包括特征提取，非线性映射和重建等模块，技术人员会预先通过成对的低分辨率的显微镜图像和高分辨率的显微镜图像来训练超分辨率模型，在使用超分辨率模型时，会输入一张低分辨率的显微镜图像，输出一张对应的高分辨率的显微镜图像。

相关技术只考虑到单张低分辨率的显微镜图像和单张高分辨率的显微镜图像之间的对应关系，得到的高分辨率的显微镜图像质量较差，不能得到较为准确的图像细节。

发明内容

本申请实施例提供了一种基于显微镜的超分辨率方法、装置、设备及介质，该方法根据显微镜图像序列，获取效果较好的高分辨率的显微镜图像。所述技术方案如下：

根据本申请的一个方面，提供了一种基于显微镜的超分辨率方法，该方法包括：

从第一分辨率的显微镜图像序列中获取待测图像和至少两张辅助图像，所述待测图像包含目标区域，所述辅助图像的显示区域与所述目标区域存在重叠区域；

将所述待测图像和所述辅助图像进行配准，得到配准图像；

从所述配准图像中提取高分辨率特征，所述高分辨率特征用于表示所述目标区域在第二分辨率的情况下的图像特征，所述第二分辨率大于所述第一分辨率；

重建所述高分辨率特征，得到与所述待测图像对应的所述第二分辨率的目标图像。

根据本申请的一个方面，提供了一种基于显微镜的超分辨率装置，该装置包括：

获取模块，用于从第一分辨率的显微镜图像序列中获取待测图像和至少两张辅助图像，所述待测图像包含目标区域，所述辅助图像的显示区域与所述目标区域存在重叠区域；

配准模块，用于将所述待测图像和所述辅助图像进行配准，得到配准图像；

提取模块，用于从所述配准图像中提取高分辨率特征，所述高分辨率特征用于表示所述目标区域在第二分辨率的情况下的图像特征，所述第二分辨率大于所述第一分辨率；

重建模块，用于重建所述高分辨率特征，得到与所述待测图像对应的所述第二分辨率的目标图像。

在本申请的一个可选设计中，所述配准模块，还用于计算所述待测图像和所述辅助图像之间的光流预测图，所述光流预测图用于预测所述待测图像和所述辅助图像之间的光流变化；根据所述光流预测图和所述辅助图像得到具有运动补偿的补偿图像；对所述补偿图像进行编码和解码得到所述配准图像。

在本申请的一个可选设计中，所述配准模块，还用于调用光流预测网络，根据所述待测图像的待测光流场和所述辅助图像的辅助光流场计算所述光流预测图。