一种基于时空双流掩码重建的微表情识别预训练方法

    公开(公告)号:CN118644882A

    公开(公告)日:2024-09-13

    申请号:CN202410781885.7

    申请日:2024-06-18

    Abstract: 本发明提供一种基于时空双流掩码重建的微表情识别预训练方法,涉及微表情识别技术领域,本发明通过对所有微表情视频序列中的每一帧进行预处理,对预处理后的数据集样本进行采样,获得微表情图像序列和对应的光流图序列,分别进行关键局部区域掩盖和帧掩盖;然后构建并自监督预训练时空双流掩码自编码器;训练后得到微表情识别自监督预训练模型,将微表情视频中的每一帧经过预处理操作后,再对预处理后的数据样本进行采样,获得微表情图像序列和对应的光流图序列,分别进行关键局部区域掩盖和帧掩盖;将所得结果输入至训练得到的微表情识别自监督预训练模型,即可实现对微表情图像序列和光流图序列的重建。

Patent Agency Ranking