一种结合多模态和权重重平衡的脑梗死病灶自动标注方法

本发明属于医疗影像人工智能分析技术领域，公开了一种结合多模态和权重重平衡的脑梗死病灶自动标注方法，包括：收集多类别脑梗死的医学影像数据并标注和对应的病灶描述文本数据；提取医学影像数据的图像特征，提取病灶描述文本数据的文本特征，并融合图像特征和文本特征形成融合特征；利用融合特征训练深度神经网络得到多模态分类模型；基于添加标注后已知类别的医学影像数据，结合权重重平衡策略训练目标检测模型，得到病灶定位检测模型；利用多模态分类模型对待标注医学影像图像进行分类，并采用病灶定位检测模型，对已分类的待标注医学影像图像中的脑梗死病灶区域进行检测及标注。本发明实现脑梗死病灶的高精度分类与高效标注。