一种基于多粒度知识蒸馏的多模态命名实体识别方法

本发明公开了一种基于多粒度知识蒸馏的多模态命名实体识别方法，包括粗粒度模态预训练和细粒度模态微调两个阶段。在粗粒度模态预训练阶段，本发明引入了一种自监督相似度对比学习方法，能够有效地进行知识迁移，为后续任务提供更强的基础；在细粒度模态微调阶段，本发明设计了一个多任务知识蒸馏微调网络，通过教师模型生成伪标签，并结合数据对齐的多模态命名实体识别辅助任务，从多模态数据中提取更有效的知识，进一步提升多模态命名实体识别的准确性和鲁棒性。