摘要
本发明提供了一种基于跨尺度对齐的图文互检索方法、系统、设备及介质,包括:获取待检索信息以及检索目标数据库;对待检索信息以及检索目标数据库中的检索目标进行标记化处理,获得标记序列;对标记序列中的标记进行编码处理,获得待检索信息以及检索目标的特征嵌入表示;基于待检索信息和检索目标对应的标记序列,分别基于各自标记之间的位置关系和共现关系进行语义聚合,获得标记序列的第一子序列集合和第二子序列集合,并基于两个集合的融合结果,获得待检索信息的语义聚合结果和检索目标的语义聚合结果;基于待检索信息的语义聚合结果,计算其与检索目标数据库中检索目标的语义聚合结果的相似度,基于相似度结果获得图像或文本检索结果。