多模态虚假新闻数据的处理方法、装置、设备以及介质

本发明公开了一种多模态虚假新闻数据的处理方法、装置、设备以及介质，涉及数据处理技术领域。通过将文本数据和图像数据各自的特征数据进行对比学习处理得到对比学习损失的对比学习处理，减少不同模态之间的异构性，实现跨模态信息的精确对齐，通过对齐后的特征，能够更好地捕捉文本和图像之间的语义关联。引入将第一数据以及图像数据和文本数据对应的融合变量进行相互学习处理得到相互学习损失的相互学习机制，在保持文本和图像各自模态特征的同时，通过信息共享实现模态间的协同学习。这一机制使模型能够自动平衡不同模态的重要性。