一种多模态图像检索方法及系统

本发明适用于图像检索技术领域，尤其涉及一种多模态图像检索方法及系统，所述方法包括：构建跨模态检索图像库，利用预先构建完成的语义识别模型，确定出每个图片的语义描述，并生成语义向量，提取出每个图像中的若干个实例，识别出视觉特征，确定出每个实例的类别，基于所述类别，校正所述语义描述；利用雾层链接预先搭建完成的边缘层和云端，将跨模态检索图像库部署到云端，接收用户上传的查询请求，提取出查询请求中的实意词。本发明通过生成缩略图，能够提供多个候选结果，增加检索准确度，通过构建雾层，能够充分发挥分布式计算资源，降低中心负载，通过数据逐步缩减方式，在保证检索准确性的同时，节省网络带宽资源。