一种基于蒸馏的轻量化无人机单目标跟踪方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于蒸馏的轻量化无人机单目标跟踪方法
申请号:CN202410830906
申请日期:2024-06-26
公开号:CN118379332B
公开日期:2024-08-16
类型:发明专利
摘要
本发明提供一种基于蒸馏的轻量化无人机单目标跟踪方法,属于目标跟踪领域。本发明的主干网络为一个轻量化的ViT‑Base模型,其层数和通道数分别为3和128,总参数量仅为1.428M。轻量化后的ViT‑Base模型大大减少了在推理过程中的时间消耗和内存占用,从而达到模型加速和轻量化的目的。为了有效提高模型的性能,本发明采用多层特征蒸馏的方法,将轻量化模型作为学生模型,ViT‑Base大模型作为教师模型完成模型训练。轻量化模型在训练之初加载预训练的MAE权重参数完成模型初始化。加载预训练权重参数,大大提高了模型的收敛速度并有效提高了模型的泛化性和鲁棒性。
技术关键词
轻量化无人机 蒸馏 跟踪方法 教师 学生 模板 图像传感器设备 监督学习方法 样本 参数 序列 编码 图像块 检测头 控制无人机 掩码矩阵 视频 坐标