- 专利标题: 基于多级属性编码器和注意力机制的人脸替换方法
-
申请号: CN202110074625.2申请日: 2021-01-20
-
公开(公告)号: CN112766160B公开(公告)日: 2023-07-28
- 发明人: 杜建超 , 肖清 , 韩硕 , 张向东
- 申请人: 西安电子科技大学
- 申请人地址: 陕西省西安市太白南路2号
- 专利权人: 西安电子科技大学
- 当前专利权人: 西安电子科技大学
- 当前专利权人地址: 陕西省西安市太白南路2号
- 代理机构: 陕西电子工业专利中心
- 代理商 侯琼; 王品华
- 主分类号: G06V40/16
- IPC分类号: G06V40/16 ; G06V10/764 ; G06T3/00 ; G06N3/0464 ; G06N3/048 ; G06N3/0455 ; G06N3/08
摘要:
本发明公开了一种基于多级属性编码器和注意力机制的人脸替换方法,主要解决现有技术中替换图像忽略背景、光照等目标属性且融合效果较差的问题。方案包括:1)利用多任务卷积神经网络对源人脸图像进行预处理;2)通过特征编码器提取源人脸身份特征;3)使用多级属性编码器通过多层次级联的卷积块和反卷积块以及层间连接提取目标人脸图像属性;4)结合注意力机制构建新型生成器网络,并设计生成器损失函数;5)制作网络训练集和测试集,对新型生成器网络进行迭代训练;6)使用训练后的网络模型生成人脸替换图像。本发明能够全面准确提取目标图像属性,更好地保留目标人脸的姿态、表情、光照等信息,生成真实自然的人脸替换图像。
公开/授权文献
- CN112766160A 基于多级属性编码器和注意力机制的人脸替换方法 公开/授权日:2021-05-07