一种数字人辅助诊断方法、装置、电子设备及可读存储介质
申请号:CN202510285414
申请日期:2025-03-11
公开号:CN120221037A
公开日期:2025-06-27
类型:发明专利
摘要
本发明提供了一种数字人辅助诊断方法、装置、电子设备及可读存储介质,应用于医疗数据处理技术领域。本申请对患者的问答音频信息进行处理,生成患者的问题语义信息和声音特征信息;对实时面部视频信息和患者的生理状态信息进行处理,生成面部微表情特征信息和生理指标特征信息;基于多模态融合网络对声音特征信息、面部微表情特征信息和生理指标特征信息进行处理,生成患者的实时情绪状态信息;对患者的实时情绪状态信息、患者的问题语义信息和患者的偏好信息进行处理,生成数字人的目标答复风格信息;基于问答规划网络对目标区域医院科室的实时运行信息和患者的历史病例记录信息进行处理,生成资源分配结果信息,生成数字人回复信息。
技术关键词
情绪状态信息
面部微表情
生理状态信息
患者
资源分配
辅助诊断方法
生成数字人
风格
分配信息
语义
面部关键点
模态特征
音频
医疗数据处理技术
诊断特征
指标
视频
多模态