一种基于多模态大模型的路侧事件理解方法

本发明提出一种基于多模态大模型的路侧事件理解方法，该方法包括获取实时交通场景图像；基于实时交通场景图像和系统指令利用多模态大模型获得关键区域；基于关键区域和实时交通场景图像利用视觉识别模型生成视觉提示信息，视觉识别模型包括开放世界目标检测模块和地图拓扑结构理解模块；基于实时交通场景图像、系统指令、视觉提示信息利用多模态大模型生成路侧事件信息。利用本发明的方法能够提升路侧事件理解的准确性。