摘要
本发明涉及智能谈话交互技术领域,公开了基于面部识别和脑电皮电的智能谈话交互系统及方法,通过模态获取模块通过传感器网络实时获取用户的模态信息,并根据环境变化校正用户的模态信息,同时对校正后的模态信息进行数据同步,全面反映用户状态变化;状态识别模块提取模态信息的特征,通过状态识别策略识别出用户状态,状态识别策略包括计算用户反应值,将用户反应值与用户反应阈值进行比对得到用户状态,能够准确识别出用户当前的状态;语音识别模块识别用户的语音并判断用户需求,能够深入理解用户在不同状态下的需求;谈话交互模块根据用户状态和用户需求生成交互响应,并收集用户对交互响应的反馈,以优化交互响应和状态识别策略。