大模型增强的设备运维多模态知识图谱构建方法、系统和存储介质

本发明公开了一种大模型增强的设备运维多模态知识图谱构建方法，首先，在双流Transformer架构中引入QWEN‑VL，实现图像与文本动态对齐并补充少样本语义，提升运维领域零件及问题实体关系识别精度；其次，提出MT‑Transformer模块，通过融合因果、扩张卷积与记忆槽机制，实现跨模态时序嵌入融合，提高新旧零件关联连续性与因果链嵌入精度；然后，设计了多模态动态权重注意力引导模块，引入权重键值引导注意力关注点，融合示意图与文本特征，提升零件与故障的实体关系建模精度；最后，将标记的图像嵌入与位置嵌入融入RoBERTa的特征嵌入，并结合CRF与SOFTMAX完成MNER与MRE任务，实现多模态运维图谱构建。本发明还提出了一种大模型增强的设备运维多模态知识图谱构建系统和存储介质。