一种基于电力场景的多模态数据融合方法、装置及存储介质
申请号:CN202510309382
申请日期:2025-03-17
公开号:CN120145314A
公开日期:2025-06-13
类型:发明专利
摘要
本发明公开了一种基于电力场景的多模态数据融合方法、装置及存储介质,其中方法包括:获取电力场景的多模态数据,对多模态数据进行编码处理得到多模态特征,将多模态特征转换为相同维度的特征向量;对特征向量添加编码信息,得到编码后特征向量;基于编码后特征向量中的特征块生成多种掩码矩阵,将所有掩码矩阵组合成完整掩码矩阵;将编码后特征向量中的特征块拼接成统一特征矩阵,将统一特征矩阵输入至Transformer编码器,使Transformer编码器根据完整掩码矩阵对统一特征矩阵中的多模态特征进行融合处理,得到融合数据。本发明能够深入挖掘不同模态之间的潜在关系,从而能够有效提高多模态数据融合效果。
技术关键词
掩码矩阵
数据融合方法
多模态特征融合
数据融合装置
场景
电力
编码器
多模态数据融合
可读存储介质
文本
参数
图像
标识符
计算机