摘要
本申请提供一种多模态信号分析方法、系统、电子设备及存储介质,涉及信号处理技术领域,该分析方法包括:获取待分析多模态信号的时域数据信息;对时域数据信息进行划分和快速傅里叶变换,得到频域数据信息;提取与频域数据信息的实部和虚部对应的特定特征数据,构建动态复值图;通过双流图注意网络对动态复值图进行处理得到目标数据信息;并进行聚合和分类以得到目标输出信息。本申请采用重叠滑动窗口方法将时域数据信息划分为分段信号并进行时域和频域的转换,避免了相移问题;通过动态复值图在局部频率卷积和采样点之间取得平衡,提高多分量在频域的识别特性;并基于双流图注意网络对动态复值图进行求解,以确定多模态信号的空间特征。