摘要
本发明公开了一种基于智能识别的防误操作闭锁系统及方法,涉及工业自动化技术领域,包括,采集多模态数据并进行预处理,生成多模态数据集,所述多模态数据包括语音数据、视觉数据和设备状态数据;基于多模态数据集,通过多模态特征编码方法提取多模态特征,多模态特征通过三维特征建模方法,生成多模态特征立方体;将多模态特征立方体输入到双流GAN网络中,生成对抗样本,构建防御模型,并通过对抗样本进行训练;将多模态特征立方体输入防御模型中,生成概率分布向量和指令置信度,并根据指令置信度进行误触识别,根据识别结果动态生成闭锁指令。本发明通过对抗性训练与误触识别机制,提高了防御模型的泛化能力和面对未知威胁时的抵御能力。