多模态大模型联邦训练中台及异构数据对齐方法

本发明的多模态大模型联邦训练中台及异构数据对齐方法，包括时序数据处理模块、文本处理模块、嵌入生成模块、本地联邦学习模块、对比学习对齐模块、全局模型聚合模块和隐私保护验证模块。时序数据处理模块生成时频矩阵信号；文本处理模块输出文本特征信号；嵌入生成模块生成时序嵌入向量和文本嵌入向量；本地联邦学习模块形成本地加密信号；对比学习对齐模块并生成梯度信号；全局模型聚合模块通过联邦平均算法处理梯度信号并形成参数更新量；隐私保护验证模块生成混淆梯度信号回传至各个模块对齐数据。本发明的多模态大模型联邦训练中台及异构数据对齐方法可以解决测井曲线与地质报告因模态差异和语义鸿沟难以有效对齐融合的问题。