摘要
本发明提供一种用于养殖人员身份识别的多模态步态识别方法及装置,涉及步态识别技术领域,该方法包括:检测养殖场景监控视频中的作业人员并进行目标跟踪,基于目标框提取步态序列帧,对步态序列帧提取人体连通域生成人体剪影图,以及对步态序列帧进行人体解析分割出7类语义部位的人体解析图,将人体剪影图和人体解析图输入多模态步态识别模型,得到多模态步态识别模型输出的人员身份识别结果。其中,多模态步态识别模型是基于带有人员身份标签的多个步态样本的多模态数据训练得到的,多模态数据包括人体剪影图和人体解析图,多模态步态识别模型用于逐帧融合人体剪影图和人体解析图的特征信息,并基于融合后的特征信息进行人员身份识别。