公开(公告)号：CN117351543A

公开(公告)日：2024-01-05

申请号：CN202311310799.X

申请日：2023-10-11

Applicant: 哈尔滨理工大学

Inventor： 宋立新 ,  孙政强

IPC: G06V40/16 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/0455 ,  G06N3/08

Abstract: 本发明公开了一种基于改进注意力机制的面部遮挡的情感识别方法。属于图像处理领域，目的是为了实现遮挡情况下的面部情感识别，以减少因面部遮挡而引起的情感识别困难和识别效果差的影响。本发明包括以下步骤：步骤1：将原始图像进行预处理后输入到以ResNet18为主干网络的特征提取网络A中得到全局特征和浅层特征；步骤2：将浅层特征进行分割处理得到四个局部特征图，再经过添加改进注意力的特征提取网络B分别提取出局部特征；步骤3：将得到的全局特征和局部特征展平为一维特征向量；步骤4：将展平后的特征向量送入以Transformer的Encoder为主的特征融合网络C中进行特征融合；步骤5：将融合后的特征向量送入网络D得到预测的类别结果。