一种基于多模态脑电眼动融合的情感分析方法

本发明公开一种基于多模态脑电眼动融合的情感分析方法及系统。通过刺激呈现模块按5秒视觉、3秒听觉等预设时序交替或同步展示情感诱发刺激序列，触发64导电极帽(10‑20系统布局，采样率≥1000Hz)采集前额叶、颞叶等脑电数据，同时利用红外瞳孔追踪技术(采样频率≥120Hz)获取眼动数据。对脑电数据进行0.5‑70Hz带通滤波、ICA去伪迹处理，眼动数据经平滑插值、卡尔曼滤波优化后，分别提取脑电α/β/γ波功率谱及眼动瞳孔变化率等特征。采用基于注意力机制的Transformer模型，经特征嵌入、多头自注意力计算实现脑电眼动特征深度融合，结合SVM或DNN分类器，经混淆矩阵优化与五折交叉验证，达成≥85％的情感识别准确率。