公开(公告)号：CN111079549B

公开(公告)日：2023-09-22

申请号：CN201911157921.8

申请日：2019-11-22

Applicant: 杭州电子科技大学

Inventor： 俞俊 ,  高飞 ,  戴玲娜

IPC: G06V40/16 ,  G06V10/80 ,  G06V10/74 ,  G06V10/771

Abstract: 本发明公开了一种利用门控融合判别特征进行漫画人脸识别的方法。本发明步骤如下：(1)数据预处理：全局模型部分将图片根据5个关键点进行放射变化并裁减到统一尺寸。局部模型部分需将图片根据17个关键点所在位置按比例裁剪并缩放。(2)特征提取及融合：对于全局及局部模型分别利用一个嵌入了CBAM注意力机制模型并Sphereface上预训练好的20层模型以及嵌入CBAM轻量级Sphereface网络进行特征提取；将17个局部特征与全局特征进行融合。(3)识别准确度：将融合后的漫画及人脸照片的特征计算余弦距离。本发明提出一种跨模态漫画人脸识别的模型，特别是提出了利用门控融合的方式对特征进行整合，并且获得了目前漫画人脸识别中的最好效果。

公开(公告)号：CN111079549A

公开(公告)日：2020-04-28

申请号：CN201911157921.8

申请日：2019-11-22

Applicant: 杭州电子科技大学

Inventor： 俞俊 ,  高飞 ,  戴玲娜

IPC: G06K9/00 ,  G06K9/62

Abstract: 本发明公开了一种利用门控融合判别特征进行漫画人脸识别的方法。本发明步骤如下：(1)数据预处理：全局模型部分将图片根据5个关键点进行放射变化并裁减到统一尺寸。局部模型部分需将图片根据17个关键点所在位置按比例裁剪并缩放。(2)特征提取及融合：对于全局及局部模型分别利用一个嵌入了CBAM注意力机制模型并Sphereface上预训练好的20层模型以及嵌入CBAM轻量级Sphereface网络进行特征提取；将17个局部特征与全局特征进行融合。(3)识别准确度：将融合后的漫画及人脸照片的特征计算余弦距离。本发明提出一种跨模态漫画人脸识别的模型，特别是提出了利用门控融合的方式对特征进行整合，并且获得了目前漫画人脸识别中的最好效果。