摘要
本发明涉及一种基于多模态感知的智慧电扶梯乘客行为检测系统及方法。基于多模态感知的智慧电扶梯乘客行为检测系统包括:多模态感知模块,包括多种模态感知器件,用于感知和采集电扶梯上可能会发生的状态或状态变化数据;边缘计算终端,用于接收多模态感知模块采集的数据,并进行计算,用于计算和判断乘客行为;云服务器,接收边缘计算终端计算结果,聚合多终端数据更新模型参数;电扶梯系统,控制电扶梯运行并接收边缘计算终端给出的判断乘客行为信息,做出相应减小风险的处理,实现联动。依据本发明的基于多模态感知的智慧电扶梯乘客行为检测系统能检测和识别出乘客的正常行为和危险行为、并对实施危险行为的乘客进行提醒或采取降低危害的措施。