摘要
本发明公开了一种自适应博弈微调的目标跟踪方法，包括S1、将模板图像和搜索图像对分割成多个图像块；S2、采用可训练的线性投影层将每个所述图像块映射到D维隐藏空间的嵌入向量，得到一个由多个标记向量组成的序列；S3、为每个所述嵌入向量添加位置编码，位置编码由预训练的绝对位置编码插值到对应嵌入向量的维度，按元素与对应的嵌入向量相加；S4、将模板与搜索图像的嵌入向量输入到多个Transformer编码器层，在每个Transformer编码器层中的线性层添加AdaLoRA模块，训练时仅对所有AdaLoRA模块、LayerNorm的前九层以及预测头的参数进行更新，其他参数在训练时将被冻结；S5、在训练时根据输入情况对微调的参数进行重要性评估，对不重要的权重进行剪枝。本发明提高了模型的有效性和效率。
