基于NanoDet-Plus和微调CLIP的行人摔倒检测方法
申请号:CN202411723785
申请日期:2024-11-28
公开号:CN119625833A
公开日期:2025-03-14
类型:发明专利
摘要
本发明公开了一种基于NanoDet‑Plus和微调CLIP的行人摔倒检测方法,步骤为:S1:收集数据制作数据集;S2:训练NanoDet‑Plus目标检测模型,得到了训练好的算法模型权重文件;S3:利用目标检测模型NanoDet‑Plus对图像进行行人识别,并将识别出的行人图像单独保存为图像文件;S4:训练CLIP模型和改进的Resnet50模型;S5:采用CLIP模型对行人姿态图像进行初步分类预测,再利用改进的Resnet50模型进行进一步分类预测,连接两个分类预测结果,从而得到行人的姿态预测结果;根据姿态预测结果判定行人的当前状态,并采取反馈措施。提高对复杂场景中行人摔倒事件的识别准确率。
技术关键词
行人摔倒检测方法
更新模型参数
算法模型
图像编码器
行人识别
信息传递方式
多尺度特征融合
数据
自然语言
代表
文本编码器
优化器
图像嵌入
行人检测
编码向量
样本