一种基于端到端架构的多模态卫星图像融合方法

本发明提供一种基于端到端架构的多模态卫星图像融合方法，属于人工智能多模态数据融合领域。针对多时相、多源卫星图像数据，方法包括多时相图像融合、多源图像融合及融合图像组合步骤。多时相图像融合步骤对低分辨率多时相多通道图像进行特征对齐、采样和融合，生成超分辨率多通道图像。多源图像融合步骤将高分辨率单通道图像与多时相融合图像结合，生成超分辨率多通道图像。融合图像组合步骤对上述融合结果进行像素级逐通道相加，形成最终的超分辨率多通道图像。本发明解决了传统卫星图像融合中多时相和多源融合分离、额外数据筛选需求高的问题，同时降低存储空间占用，减少卫星物联网数据传输压力。