摘要
本发明涉及数据处理技术领域,可应用于金融科技及医疗健康等业务场景中,公开了一种多模态生理信号处理方法、装置、设备及介质,包括:获取并预处理多模态生理信号数据,生成数据段,执行数据增强,生成受损数据段,将各生理信号输入模态编码器,生成模态专属表征,聚合非目标模态表征,生成正样本聚合表征,受损数据段输入解码器,生成重构数据段,调整表征相似度,优化模态编码器和解码器,基于更新后的模态编码器生成目标任务结果。本发明通过增强目标模态与正样本聚合表征的相似度,并减小目标模态与其他数据段的相似度,优化模态编码器和解码器的更新过程,从而提升目标任务的处理效果和不同任务间的迁移能力。