摘要
本发明公开了一种全双工互动问答数字人的情感理解与反馈方法,包括S1、唤起互动:用户通过人体检测唤起或者语音指令唤起的方式,使数字人系统的数字人进入互动状态;S2、状态分析:数字人系统通过采集用户的图像数据和音频数据,实时判断用户的状态,并对用户的方向、情绪、话语内容进行实时识别分析;S3、反馈输出:数字人系统将用户的方向、情绪和话语内容分析结果,实时通过屏幕以语音、表情、肢体动作驱动数字人,并附加辅助文字、图像、视频的方式反馈给用户。优点是:通过先进的算法准确判断用户的情绪状态,根据用户的情感和话语内容实时驱动数字人表情、肢体动作和语音反馈,及时做出响应,实现类真人的实时互动情景。