一种异步多模态情绪识别方法、装置、设备及介质

本发明涉及情绪识别技术领域，具体是涉及一种异步多模态情绪识别方法、装置、设备及介质。本发明对用户的各模态生物数据分别进行脉冲编码，得到各模态生物数据的脉冲序列，基于脉冲编码的发放时间对各个脉冲序列应用跨模态同步神经元，得到用户的情绪特征，最后对情绪特征应用情绪分类器，得到情绪分类结果。由于本发明的脉冲编码所形成的脉冲序列能够记录生物数据发生变化的时间，又是根据脉冲编码的发放时间对脉冲序列应用跨模态同步神经元以分析情绪特征，因此本发明的脉冲编码和跨模态同步神经元相结合，能够识别多模态生物数据各自发生变化的时间，并根据多模态生物数据发生变化的前后时间顺序识别用户情绪特征，以提高情绪识别的准确性。