基于跨尺度对齐的图文互检索方法、系统、设备及介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于跨尺度对齐的图文互检索方法、系统、设备及介质
申请号:CN202411656457
申请日期:2024-11-19
公开号:CN119577174A
公开日期:2025-03-07
类型:发明专利
摘要
本发明提供了一种基于跨尺度对齐的图文互检索方法、系统、设备及介质,包括:获取待检索信息以及检索目标数据库;对待检索信息以及检索目标数据库中的检索目标进行标记化处理,获得标记序列;对标记序列中的标记进行编码处理,获得待检索信息以及检索目标的特征嵌入表示;基于待检索信息和检索目标对应的标记序列,分别基于各自标记之间的位置关系和共现关系进行语义聚合,获得标记序列的第一子序列集合和第二子序列集合,并基于两个集合的融合结果,获得待检索信息的语义聚合结果和检索目标的语义聚合结果;基于待检索信息的语义聚合结果,计算其与检索目标数据库中检索目标的语义聚合结果的相似度,基于相似度结果获得图像或文本检索结果。
技术关键词
检索方法 标记 序列 语义 图文 文本 非暂态计算机可读存储介质 图像 关系 特征提取单元 数据获取单元 标签类别 检索系统 计算机程序产品 处理器 编码 矩阵 注意力机制 视觉 滑动窗口