摘要
本发明公开了一种骨科术后的多模态数据处理方法、系统及终端,所述方法包括:采集患者骨科术后的第一多模态数据和第二多模态数据,将第一多模态数据输入到强化学习模型进行处理,输出目标动作,目标动作为推送健康教育知识或执行监测方案;构建医疗知识图谱,将第二多模态数据输入医疗知识图谱中匹配,得到目标核心实体,根据目标动作得到所述目标核心实体的目标动作内容,将目标动作内容作为目标健康教育知识或目标监测方案;若目标动作内容为目标监测方案,将目标监测方案发送给医护人员以实现定时监测;若目标动作内容为目标健康教育知识,将目标健康教育知识进行转换和整合后发送给患者进行学习。本发明能对多模态交互数据进行有效处理。