[发明专利]一种基于非对齐RGB图像的融合高光谱超分辨率方法和系统

摘要

本发明涉及一种基于非对齐RGB图像的融合高光谱超分辨率方法和系统，属于超分辨率成像技术领域。首先基于深度学习理论，针对RGB图像与高光谱图像分别构建深度RGB图像特征提取器和高光谱图像特征提取器。使用特征提取器分别提取RGB参考图像和高光谱图像的多层级特征。使用多层级的深度光流估计网络，将RGB参考图像与高光谱图像的多层级特征进行对齐。当得到对齐的RGB图像特征以及高光谱图像特征之后，构建深度自适应特征解码器，对对齐后的特征进行解码，重建出高分辨率的高光谱图像。本方法无需显式的中间步骤与人工干预，仅使用高光谱相机、RGB相机以及必要的固定装置的情况下，利用拍摄到的不对齐的高分辨率RGB图像，对低分辨率高光谱进行空间超分辨率。