摘要
本发明公开一种基于多模态交互与融合的多光谱目标检测方法,涉及自动驾驶多模态信息处理技术领域。该方法能够根据目标特性和环境变化实时优化融合效果,显著提高算法的检测精度,并满足实时处理和资源受限的应用需求,通过在融合前进行模态间的交互,补充各自缺失的信息,显著提升了跨模态特征融合的质量。采用细粒度特征整合,不仅提供了更加精确和丰富的局部特征,还逐步建立和增强了模态间的长程依赖关系,提升了多模态特征的全局一致性和表示能力。最后,该方法设计的轻量高效的交互与融合模块,具有更强的实用性,不仅适用于当前的目标检测任务,也能推广到遥感等其他领域的多光谱目标检测,具有广泛的适用性和扩展性。