摘要
本发明提供一种基于人脸识别的门禁系统及识别方法,系统包括:多模态图像采集子系统,集成可见光摄像头、深度摄像头和红外热成像摄像头,用于同步采集人脸的可见光图像、深度图像和红外热成像图像;图像预处理单元,对所述图像进行对应预处理;特征提取网络模块,进行图像特征提取;多模态特征融合与对齐模块,采用基于互信息最大化和自适应加权的特征融合策略,计算互信息矩阵确定自适应权重并加权求和,且运用基于典型相关分析的方法进行特征对齐;人脸识别分类与验证模块,采用多层次融合策略,对图像进行验证。本发明有效减少误识率和拒识率,具备强大的抗欺骗能力,能够精准识别并抵御各类伪造人脸手段的欺骗攻击。