摘要
本发明公开了基于多模态信息融合的智能家居协同控制方法及系统,涉及智能家居控制技术领域,包括以下步骤:采集多种模态的家居环境信息,包括但不限于通过图像传感器获取的视觉信息、通过声音传感器采集的音频信息以及各类环境传感器收集的温湿度、光照强度物理环境信息;对采集到的多模态信息进行预处理,将不同格式和特征的数据转化为统一可识别的形式。通过多种图像传感器、声音传感器以及环境传感器采集多模态信息,能够全方位、立体地感知家居环境,与传统单一传感器感知方式相比,可获取更丰富的环境细节,不仅能感知室内温度,还能通过视觉信息了解室内人员活动情况,为智能家居设备的协同控制提供更全面的数据基础。