面向不确定模态缺失的在线协作会话情感识别方法及系统

本发明涉及面向不确定模态缺失的在线协作会话情感识别方法及系统，该方法包括：根据不同阶段将协作会话数据分割为多个子协作会话数据。将每个子协作会话数据转化为会话文本数据，对每个子协作会话数据进行情感标注。抽取预处理后的子协作会话数据中的单模态特征，通过LSTM层捕捉子协作会话数据中的上下文信息，以获取各模态表征。将多个单模态特征进行拼接处理，探索多模态融合特征与单模态特征之间的跨模态情感促进信息。构建多视角情感推理图，通过图注意力机制更新节点表征，以获取融合话语表征。通过融合话语表征对会话情感预测层训练得到协作会话情感识别模型，并调用协作会话情感识别模型对预处理后的当前协作会话数据进行识别。