鸟类语义识别模型的训练方法、鸟类语义识别方法及装置
申请号:CN202510834591
申请日期:2025-06-20
公开号:CN120822576A
公开日期:2025-10-21
类型:发明专利
摘要
本申请涉及计算机技术领域,具体涉及一种鸟类语义识别模型的训练方法、鸟类语义识别方法及装置,训练方法包括:获取第一参考鸟类图像和第一参考描述文本;由教师模型对第一参考鸟类图像和第一参考描述文本进行特征提取,得到第一多模态特征;由教师模型根据第一多模态特征确定第一鸟类语义识别结果;由学生模型对第一参考鸟类图像进行特征提取,得到第一图像特征;由学生模型根据第一图像特征确定第二鸟类语义识别结果;基于第一多模态特征和第一图像特征,确定特征损失;基于第一鸟类语义识别结果和第二鸟类语义识别结果,确定鸟类语义识别损失;基于特征损失和鸟类语义识别损失,训练学生模型;从而实现了从多模态到单模态的鸟类识别知识蒸馏。
技术关键词
多模态特征
语义识别方法
文本
图谱
学生
教师
特征提取模块
像素
计算机
识别模块
图像采集设备
可读存储介质
训练装置
处理器
指令
存储器
样本