一种基于动态协同注意力和VA-Mamba解码器的视频异常检测方法

本发明提供一种基于动态协同注意力和VA‑Mamba解码器的视频异常检测方法及装置，涉及计算机视觉技术领域。该方法包括：基于CLIP模型以及MFCC算法，根据实时视频进行特征提取；基于多头注意力机制，根据关键视觉特征以及关键频谱特征进行特征加权融合，获得融合特征；将融合特征输入VA‑Mamba解码器进行数据解码，获得视‑音双通道高维特征；基于多分类异常检测模型，根据视‑音双通道高维特征，对实时视频进行视频异常检测，获得异常检测结果；基于预设的Prompt模版，根据异常检测结果，使用微调后的Qwen2.5模型进行异常解析，获得异常解析结果；将异常检测结果以及异常解析结果保存，并发出警报。本发明是一种结合视频流和音频流的高效且准确的视频异常检测方法。