摘要
本发明公开一种面部多模态信息采集设备,包括:半球型壳体,其开口朝向患者的面部;且患者的头部位于半球型壳体的球心处;RGBD相机系统,固定于半球型壳体的内侧面,用于拍摄患者的面部的RGBD图像以及拍摄视频;眼球追踪系统,固定于半球型壳体的内侧面,用于追踪患者的人眼转动角度和注视线方向;照明系统,固定于半球型壳体的内侧面,用于在拍摄RGBD图像和视频时提供所需的亮度以及向患者提供眼球观察方位引导;音频输入系统,固定于半球型壳体的内侧面,用于采集医生和患者的音频数据;以及微处理系统,与RGBD相机系统进行通信连接,用于对RGBD图像以及视频进行测量分析,以生成患者的面部的三维模型。本发明实现了一体化、高效、同步的多模态信息采集。