摘要
本发明公开了一种基于多模态数据感知设备的变电站故障预警方法及系统,方法包括:无人巡检系统采集设备图像;将所述设备图像进行清晰化预处理;将清晰化后的设备图像通过最优深度联合信源信道编解码模型进行传输,获取故障分析图像;将所述故障分析图像结合三维点云数据进行跨模态融合,使用多模态跨目标融合模块并进行三维目标检测定位;根据三维目标检测定位,判断可能故障位置,并应用无人巡检系统重新拍照得到不同空间尺度的图像;所述多模态跨目标融合模块对重新拍照得到的不同空间尺度的图像再次与三维点云数据结合,进行故障分析和定位,完成对特高压变电站故障的多尺度重决策,本发明能够提高变电站故障识别的精确度。