摘要
本发明涉及轨道交通听力辅助技术领域，公开了一种基于多模态感知的轨道交通听力障碍语音辅助系统。系统包括多模态数据采集模块，用于获取语音信号、环境振动信号及视觉唇语信息；语音增强处理模块，利用深度降噪网络生成去噪语音流；振动信号解析模块，提取振动特征向量并构建映射模型；唇语识别模块，生成唇语文本预测结果；多模态融合模块，通过动态加权融合模型输出增强语音辅助信息流。该系统通过多模态数据采集与融合技术，有效解决了轨道交通环境中听力障碍人群获取语音信息困难的问题，提高了信息获取的准确性和全面性，提升了听力障碍者的出行体验和安全性。
