一种基于时空双流掩码重建的微表情识别预训练方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于时空双流掩码重建的微表情识别预训练方法
申请号:CN202410781885
申请日期:2024-06-18
公开号:CN118644882A
公开日期:2024-09-13
类型:发明专利
摘要
本发明提供一种基于时空双流掩码重建的微表情识别预训练方法,涉及微表情识别技术领域,本发明通过对所有微表情视频序列中的每一帧进行预处理,对预处理后的数据集样本进行采样,获得微表情图像序列和对应的光流图序列,分别进行关键局部区域掩盖和帧掩盖;然后构建并自监督预训练时空双流掩码自编码器;训练后得到微表情识别自监督预训练模型,将微表情视频中的每一帧经过预处理操作后,再对预处理后的数据样本进行采样,获得微表情图像序列和对应的光流图序列,分别进行关键局部区域掩盖和帧掩盖;将所得结果输入至训练得到的微表情识别自监督预训练模型,即可实现对微表情图像序列和光流图序列的重建。
技术关键词
预训练方法 注意力 序列 编码器训练 预训练模型 像素 微表情数据 视频 解码器 微表情识别技术 图像 多层感知机 重构 时域特征 模块 关键点 人脸检测算法