一种基于时序视觉信号与交叉注意力的扫描激光焊接成形监测方法

本发明公开一种基于时序视觉信号与交叉注意力的扫描激光焊接成形监测方法，属于材料加工工程领域，采用视觉传感系统采集焊接过程中的视觉图像信息，采用基于深度学习的语义分割方法实现对视觉信号中的匙孔和熔池区域进行区分，构造具有高速运动匙孔和动态流动熔池的时序性视觉数据库。设计具有双分支的Transformer类型的时序性神经网络模型，包括匙孔和熔池两个分支。采用多头注意力机制分别实现对匙孔和熔池的时序性图像信息进行特征提取和学习，采用交叉注意力机制进行特征融合提升模型对特征提取的能力。基于时序视觉信号与交叉注意力深度学习模型实现对扫描激光焊缝成形的预测精度超过99%。本发明能够提升焊接质量。