摘要
本发明提供一种基于多模态智能体信息融合的教学评估方法及装置,具体包括:从目标课堂的课堂监控视频中定位每个学生目标,获取每一学生目标的表情关键帧以及行为视频帧;基于表情识别模型对表情关键帧进行表情识别,获取每一学生目标在表情关键帧中的表情类别以及每一所述表情类别的第一占比,基于行为识别模型对行为关键帧进行行为识别,获取每一所述学生目标在所述行为关键帧中的行为类别以及每一所述行为类别的第二占比,基于每一学生目标的随堂测验成绩、第一占比以及第二占比,获取所述目标课堂的教学评估结果;通过融合教学课堂视频中的学生表情和行为对学生课堂状态进行综合评估,实现了课堂整体教学评估以及针对每个学生的听课状态评估。