一种多模态数据融合方法、系统、计算机设备及可读存储介质

本发明公开了一种多模态数据处理方法、系统、计算机设备及可读存储介质，对边端模型和云端模型分别进行数据处理，通过语义和特征加权的总损失函数使边端模型与云端模型的数据处理结果逼近，对边端模型进行优化；将优化后的边端模型作为生成器、云端模型作为判别器，进行对抗训练，对边端模型进一步改进；当改进后的边端模型优于云端模型时，边端模型和云端模型角色互换，边端模型指导云端模型参数更新；根据改进的边端模型对获取的多模态数据进行数据处理。多层级蒸馏和对抗蒸馏分别从纵向知识深度萃取和横向模型动态优化突破传统蒸馏瓶颈，既保障了多模态电网数据的跨模态特征融合精度，又通过边云模型的竞争性协同学习持续提升系统整体性能。