摘要
本发明属于图像处理领域,公开了一种基于多模态数据动态融合的农田遮挡作物识别方法,包括:获取RGB图像和深度图像;通过跨模态动态融合模块融合RGB图像和深度图像,提取融合图像的第一图像特征和第二图像特征,自适应融合第一图像特征和第二图像特征,得到第一融合特征;通过跨模态动态融合模块将RGB图像和深度图像按照通道维度进行拼接,通过交叉注意力机制生成拼接图像的注意力图,并通过注意力图对第一融合特征进行优化,得到第二融合特征;通过方向感知门控模块增强第二融合特征的方向敏感特征,得到第三融合特征,基于空间注意力权重矩阵对第三融合特征进行加权,并基于加权后的特征生成识别结果。可以提高作物的检测精度,并降低漏检率。