一种多模态数据融合的智能感知系统

本发明公开了一种多模态数据融合的智能感知系统，涉及智能交通技术领域。该多模态数据融合的智能感知系统，包括：数据采集与预处理模块、多模态数据融合模块、智能感知模块、目标检测与行为预测模块、系统验证与优化模块，通过整合毫米波雷达与摄像头数据，实现了高精度、高稳定性的目标感知与跟踪。多模态数据融合模块有效结合了物理特征与视觉特征，提升了感知的准确性和鲁棒性。智能感知模块采用容积卡尔曼滤波器和匈牙利算法，优化了状态估计和目标关联，确保了目标的持续精准跟踪。目标检测与行为预测模块利用先进的YOLOv5模型和DeepSORT算法，实现了多目标的精准检测与轨迹预测，进一步提升了系统的智能化水平。