一种基于多模态妇科医患信息实时交互方法及系统

本发明涉及涉及数据融合与智能分析技术领域，尤其涉及一种基于多模态妇科医患信息实时交互方法及系统。所述方法包括以下步骤：通过对妇科医患系统进行医患对话语音采集并进行医患语音分离，得到医生语音数据以及患者语音数据；对患者语音数据进行情感映射并进行语义解析，得到情感情绪映射规则以及患者语义解析数据；根据情感情绪映射规则以及患者语义解析数据进行情感语义关联分析，得到患者情感语义矩阵；获取妇科检查图像数据；根据妇科检查图像数据进行妇科标志物多尺度加权分析并进行特征向量生成，得到妇科图像特征向量。本发明通过提高了语音的交互效率以及解决了妇科患者病情的情绪问题，提高了患者的体验感。