基于多模态情绪感知的心理状态监测方法及装置

本申请公开了一种基于多模态情绪感知的心理状态监测方法及装置，包括：在舰船的密闭空间内通过可穿戴设备采集船员的多模态数据集；基于猎豹优化算法和奇异谱分析对多模态数据集进行去噪，得到去噪后的多模态数据集；对去噪后的多模态数据集中的单模态数据进行特征提取，得到多个单模态特征矩阵；对多个单模态特征矩阵进行多模态融合，生成融合特征，包括基于证据深度学习的决策级融合、基于多头注意力机制的特征级融合；基于融合特征对船员进行心理状态监测，得到心理状态参数，通过对船员的多模态情绪感知数据进行特征提取和多模态融合，根据得到的融合特征能够准确预测船员的心理状态参数，进而有效提高心理状态监测的准确性和可靠性。