摘要
本发明提供了基于多模态交互的无障碍智能导医方法及平台,涉及多模态交互技术领域,包括:根据双模态状态采集单元获取用户时序状态数据进行导医支持状态检测,输出目标导医支持模态;调用目标模态导医交互容器;采用用户输入的导医需求数据,遍历医疗资源导航图谱定位初始交互节点;将交互响应回复转换为模态问诊响应进行用户初始需求意图回复;依据用户的更新反馈需求,执行多轮需求意图解析,输出科室导航建议标签集;将需求交互记录和科室导航建议标签集打包为导医需求告警发送至目标辅助导医。本发明解决了现有技术通常依赖单一模态交互,无法为特殊群体提供全面的支持,进而影响用户体验和服务效率的技术问题。