基于多模态多层次特征聚合的小样本图像分类方法及系统
申请号:CN202410868719
申请日期:2024-07-01
公开号:CN118411572B
公开日期:2024-09-10
类型:发明专利
摘要
本发明公开了基于多模态多层次特征聚合的小样本图像分类方法及系统,涉及深度学习、计算机视觉技术领域,包括:根据支持集数据的类别标签获取语义信息,将语义信息输入至文本编码器中,得到文本特征,将支持集和查询集的数据输入至预先建立的卷积神经网络模型内,得到图像特征;将文本特征与支持集图像特征进行融合,得到多模态特征,多模态特征的支持集数据和图像特征的查询集数据输入至预先建立的卷积神经网络模型内,得到分类预测结果,利用分类预测结果,采用交叉熵损失函数对模型进行迭代训练,得到训练后的小样本图像分类网络模型;将小样本图像数据集内的测试集数据输入至训练后的小样本图像分类网络模型内,得到小样本图像的分类结果。
技术关键词
卷积神经网络模型
多层次特征
图像分类网络
图像分类方法
样本
多模态特征
文本编码器
模型训练模块
训练集数据
注意力
语义
图像分类系统
字典
特征提取模块
概念