摘要
本发明涉及人工智能技术领域,公开一种基于人工智能的数字人驱动方法,包括:步骤1,通过可穿戴设备采集学员的语音信号、面部肌电信号、瞳孔尺寸信号及手部运动信号,所述可穿戴设备包含头盔内置传感器和手部运动捕捉装置;步骤2,将步骤1的语音信号转换为基频特征向量,将面部肌电信号转换为28维肌肉激活度向量,将瞳孔尺寸信号转换为直径变化率标量,将手部运动信号转换为六自由度位姿矩阵。本发明采用多模态行为识别引擎融合微表情分析、语音应激检测与骨骼动作捕捉技术,达到实时识别学员细微异常反应的技术效果,相较于现有技术中基于预设脚本的视觉行为识别方案,解决纠偏响应延迟与安全知识记忆效果差的不足。