基于多模态数据融合和图神经网络的智能交通监控方法、装置及电子设备
申请号:CN202410772891
申请日期:2024-06-17
公开号:CN118366311B
公开日期:2024-08-20
类型:发明专利
摘要
本发明实施例公开的基于多模态数据融合和图神经网络的智能交通监控方法、系统、电子设备及存储介质,涉及智慧交通技术领域,有利于提升整个智能交通监控系统的性能和可靠性,使其更好地适应复杂的交通环境的监控分析,包括步骤:获取目标交通场景中的多模态数据,并对所述多模态数据进行同步和校准,所述多模态数据包括:图像、点云、声音和温度;利用深度学习算法从每种模态的数据中提取特征,并通过融合算法将提取出的特征进行融合,以增强在恶劣天气、光照变化或遮挡情况下的数据质量;基于预先训练得到的图神经网络预测模型,输入融合后的数据特征,输出交通场景中的交通元素的属性特征和相互关系特征;根据所述交通元素的属性特征和相互关系特征,对目标交通场景中的交通元素的流动和行为模式进行监控分析。本发明适用于交通监控分析及控制场景中。
技术关键词
神经网络预测模型
智能交通监控方法
多模态数据融合
智能交通监控系统
节点特征
多层感知器
元素
场景
注意力机制
深度学习算法
可执行程序代码
动态时间窗口
融合算法
加权特征
红外热成像仪
噪声模式