摘要
本发明公开了一种基于张量动态交互与解耦的多模态情感分析方法,属于多模态信息处理领域,包括以下步骤:特征提取,将原始模态数据分别输入至不同的编码器进行特征提取以生成多模态的潜在特征表示;特征交互与解耦,扩展拼接并利用笛卡尔积和爱因斯坦求和约定生成交互特征;卷积与池化:交互特征经过卷积操作逐步提取更高维度的特征,将特征图展平为一维特征向量,使用Transformer编码器对每个模态特征进行处理;步骤S4,情感预测:将解耦后的特征向量输入,通过多层感知器进行情感标签预测,并通过平均绝对误差损失函数优化预测精度。本发明能够解决现有多模态情感分析模型在处理模态间交互与特征解耦方面存在的不足。