摘要
本申请公开了一种多模态数据的快速检索方法、装置及存储介质,用于对多模态数据进行快速检索。本申请包括:收集多个公开数据集,数据集包含至少两种不同模态的数据类型;对数据集进行标注,生成与多模态数据相关的标注信息;使用多模态特征提取模型对数据集中的标注信息进行特征提取,生成多模态的特征向量;根据特征向量,使用跨模态特征融合算法,基于注意力机制计算各模态特征向量的加权平均,生成融合特征向量;根据相关的多模态数据,使用加权余弦相似度算法计算特征向量的相似性;根据用户输入查询的特征向量,通过特征向量的相似性从融合特征向量中检索出相关的多模态数据;将多模态数据按相关性排序,获得检索结果。