公开(公告)号：CN116682154A

公开(公告)日：2023-09-01

申请号：CN202310399938.4

申请日：2023-04-13

Applicant: 北京科技大学

Inventor： 孟星华 ,  刘艳 ,  杨耀 ,  杨思琪 ,  殷绪成

IPC: G06V40/16 ,  G06V10/143 ,  G06V10/764 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明实施例涉及一种异质人脸识别模型的训练方法、识别方法、装置及设备，涉及图像处理领域，通过将样本集中各类目标对象的至少两种模态人脸图像输入到预训练的识别模型中，输出至少两种模态人脸图像对应的特征向量；根据特征向量确定第一原型向量并初始化分类器参数，获得初始异质人脸识别模型；迭代执行如下步骤，直至获得最终识别模型：将预设数量的跨模态困难样本对输入到上一迭代获得的特征提取器中，输出每个跨模态困难样本对的两个特征向量；根据任一特征向量和第一原型向量确定第二原型向量；根据另一特征向量和第二原型向量构建模型损失函数；调整上一迭代获得模型参数；即在模型训练时，在原型中添加了跨模态信息，提高模型精度。