摘要
一种应对多任务的少信息损失的特征提取方法,包括:将一输入信息同时输入至两条独立路径中,第一路径为卷积神经网络路径,第二路径为Vision Transformer路径;输入信息为一张图片或一组原始特征矩阵;通过第一路径关注到第一组特征矩阵,对应输入信息中的局部特征;通过第二路径关注到第二组特征矩阵,对应输入信息中的全局特征;将两组特征矩阵的相似区域选出并进行融合,并且进行融合的特征分别对应两组特征矩阵中的不同深度层;将两组特征矩阵中未融合的特征进行信息恢复,并将恢复后的特征叠加到已融合的特征上。本发明采用了错位融合策略,促进了具有相似表现的特征的融合,从而有效地减轻了信息损失,提升了下游任务的准确率。