摘要
本申请公开了一种基于数据融合的铁路检修群体行为识别方法及系统,属于群体行为识别技术领域;其中方法包括:对铁路检修监控视频的RGB数据进行特征处理,得到多个不同层级的提取特征,通过多尺度局部特征融合网络和时空注意力网络处理,以得到RGB时空注意力特征;获取RGB数据的坐标分支输出特征,将坐标分支输出特征与RGB时空注意力特征进行融合得到RGB目标特征;获取关键点数据中,对关键点数据进行处理得到关键点目标特征;最后,将RGB目标特征和关键点目标特征进行融合,得到识别特征;通过提取并融合不同尺度的关键特征,提高在铁路检修监控视频中复杂场景下群体行为识别的准确性和鲁棒性。