摘要
本发明属于医学图像识别技术领域,具体公开了一种基于心脏多模态影像的心肌梗死并发症识别方法,首先获取多模态医学图像数据和对应的诊断报告文本数据;再进行心肌梗死并发症识别模型的构建;进而采用分离训练的思想,将整体网络分为特征提取阶段和图像文本特征匹配阶段,通过L1损失对特征提取阶段网络进行反向传播,优化特征提取网络的权重参数;通过对比损失对图像文本匹配阶段网络进行反向传播,优化图像和文本编码器的参数;最后采集病人心脏的医学影像,输入至训练好的心肌梗死并发症识别模型,生成心脏病症并发症的文字诊断报告。从而实现心肌梗死并发症的早期自动诊断。