摘要
本发明涉及深度学习技术领域,具体涉及一种基于深度学习的智能报告解读方法及系统,方法包括:获取包含多个体检项目的体检报告,识别文本信息和图像信息;将文本信息和图像信息输入报告识别模型,通过图像编码器提取体检项目的图像特征,通过文本编码器提取体检项目的文本特征;通过注意力融合层动态分配图像特征和文本特征的权重,将加权后的图像特征对齐到文本特征的维度后,与加权后的文本特征拼接,得到融合特征;通过分类器对融合特征进行分类处理,识别体检报告中的关注项目,输出与关注项目对应的健康类别;将关注项目以及与关注项目对应的健康类别输入知识图谱,得到体检报告的解读结果;本发明提高了体检报告解读的准确性和效率。