基于HUD面向驾驶员行为预测系统及异常预警系统

本发明公开了基于HUD面向驾驶员行为预测系统及异常预警系统，属于智能驾驶安全技术领域，包括数据采集与预处理模块、特征提取模块、交叉模态注意力机制模块和行为预测模块；所述数据采集与预处理模块，用于实时采集驾驶员的多模态数据，并对所述多模态数据进行预处理，得到预处理后的多模态数据；所述特征提取模块，基于预处理后的多模态数据分别进行特征提取；所述交叉模态注意力机制模块用于计算模态间的注意力权重，对每个时间窗口内各模态数据的特征进行动态加权融合，得到跨模态特征；所述行为预测模块基于所述跨模态特征预测驾驶员的行为。本发明系统实现了多模态信息融合，精准的时序建模以及提高了行为预测精度。