基于多模态特征解耦、重组与融合的癌症生存预测系统

本发明公开了一种基于多模态特征解耦重组与融合的癌症生存预测系统，包括数据获取及预处理单元，用于获取包含影像数据、病理切片数据的多模态癌症数据并进行预处理；癌症生存预测单元，其用于利用癌症生存预测模型基于预处理后的多模态数据进行生存预测，具体包括：利用区域交叉注意力和全连接进行特征交互和解耦得到各自的特定模态特征、探索模态特征和共享模态特征，这四类模态特征经过采用随机特征重组策略进行重组后再经过特征融合得到融合特征，融合特征用于生存预测。利用该系统可以解决实际应用中仅依靠单一模态或传统融合方法分析癌症患者影像及病理数据来预测生存风险不够精准的问题，从而指导医生的后续治疗方案。