图文处理模型训练方法及装置

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
图文处理模型训练方法及装置
申请号:CN202510620511
申请日期:2025-05-14
公开号:CN120510466A
公开日期:2025-08-19
类型:发明专利
摘要
本说明书实施例提供图文处理模型训练方法及装置,所述图文处理模型训练方法包括:确定全局样本图像,以及与所述全局样本图像对应的全局样本文本,并基于所述全局样本图像和所述全局样本文本构建全局图文对。基于所述全局样本图像和所述全局样本文本构建局部图文对和混合图文对。局部图文对和混合图文对是在全局样本图像和所述全局样本文本的基础上构建的局部样本和混合样本,进而为初始图文处理模型的训练准备类型丰富的样本。利用所述全局图文对、所述局部图文对和所述混合图文对训练初始图文处理模型,直至获得满足训练停止条件的图文处理模型。可以提升初始图文处理模型针对图像的细粒度检索的能力,提高初始图文处理模型图文检索的准确性。
技术关键词
图文 模型训练方法 样本 功能模块 文本 局部图像特征 计算机可执行指令 混合损失函数 编码模块 图像特征集 模型训练装置 处理器 计算机程序产品 图像编码 可读存储介质 存储器