一种基于多模态对比学习的医学图像预测方法

本发明公开了一种基于多模态对比学习的医学图像预测方法，涉及图像处理技术领域，该基于多模态对比学习的医学图像预测方法包括以下步骤：获取肺结节图像数据集并为图像数据集配对文本嵌入数据；基于预处理后的肺结节图像数据集和文本嵌入数据构建多模态对比学习模型，并对多模态对比学习模型进行初次训练；调整初次训练后的多模态对比学习模型参数并进行二次训练，对训练完成后的多模态对比学习模型依次进行性能测试和性能评估；利用性能评估达标后的多模态对比学习模型对肺结节图像数据集进行预测，得到肺结节良恶性预测结果。本发明实现了图像和文本在潜在语义空间中的精确对齐，有效地提高了分类模型识别真阳性结节的能力。