摘要
本发明涉及计算机视觉技术领域,尤其是指一种非对齐可见光‑热红外图像语义分割方法和系统,包括:将可见光图像和热红外图像分别经过其对应的特征编码器,得到五个层级的可见光特征和热红外特征;将同一层级的可见光特征和热红外特征输入该层级的变形感知对齐增强模块,得到各个层级的对齐增强特征;将同一层级的对齐增强特征和可见光特征输入该层级的互补特征聚合模块,得到各个层级的跨模态聚合特征;各个层级的特征解码块以当前层级的可见光特征、热红外特征、跨模态聚合特征和前一层级的解码特征为输入,得到当前层级的解码特征;将第一个层级的解码特征经过输出层得到预测分割结果。本发明提高了对非对齐可见光‑热红外图像分割的准确性。