摘要
本发明公开了一种基于多模态质量变化的动态船舶分类识别方法,包括:将采集到的红外光图像和可见光图像分别输入至两个独立分支;两个独立分支中输入数据分别通过嵌入层进行特征提取,并将提取到的两个特征通过N组融合处理模块依次进行处理,得到最终处理后的红外光特征向量和可见光特征向量;将最终处理后的两个特征向量输入至共享的专家门控网络,根据两个模态的质量变化动态分配权重,进行模态特征融合;将融合后的特征输入至分类头,进行船舶识别分类,输出最终的船舶识别结果。本方法能够有效应对红外光与可见光图像质量不齐的情况,提升复杂场景下船舶识别的准确性和鲁棒性。