公开(公告)号：CN113947550A

公开(公告)日：2022-01-18

申请号：CN202111235541.9

申请日：2021-10-22

Applicant: 南京邮电大学

Inventor： 霍智勇 ,  操伟业

IPC: G06T5/00 ,  G06N3/04 ,  G06N3/08

Abstract: 一种基于潜在空间嵌入扩展的真实图像重建方法，首先有监督地训练一个域内引导编码器，将给定的图像映射到StyleGAN的固有潜在空间中，其中引入像素损失用来保持视觉质量，使编码后的潜码在像素域进行对齐；引入感知损失，用来引导逆向映射的潜码降落到StyleGAN空间的语义域内，使编码后的潜码在语义域内进行对齐。为了进一步提高重构图像的质量，提出了嵌入优化算法，实现StyleGAN潜在空间的扩展，将域内引导编码器的输出作为初始值进行优化，来微调编码器产生的潜码，实现真实图像的高准确性逆映射。本方法可以解决真实图像逆向映射后重构图像质量不高、不能够通过改变重构后的潜码进行语义编辑的问题，能高度还原真实图像，并且能通过改变潜码进行准确的语义操纵。

公开(公告)号：CN113947550B

公开(公告)日：2024-11-08

申请号：CN202111235541.9

申请日：2021-10-22

Applicant: 南京邮电大学

Inventor： 霍智勇 ,  操伟业

IPC: G06T5/60 ,  G06N3/0464 ,  G06N3/045 ,  G06N3/0475 ,  G06N3/094

Abstract: 一种基于潜在空间嵌入扩展的真实图像重建方法，首先有监督地训练一个域内引导编码器，将给定的图像映射到StyleGAN的固有潜在空间中，其中引入像素损失用来保持视觉质量，使编码后的潜码在像素域进行对齐；引入感知损失，用来引导逆向映射的潜码降落到StyleGAN空间的语义域内，使编码后的潜码在语义域内进行对齐。为了进一步提高重构图像的质量，提出了嵌入优化算法，实现StyleGAN潜在空间的扩展，将域内引导编码器的输出作为初始值进行优化，来微调编码器产生的潜码，实现真实图像的高准确性逆映射。本方法可以解决真实图像逆向映射后重构图像质量不高、不能够通过改变重构后的潜码进行语义编辑的问题，能高度还原真实图像，并且能通过改变潜码进行准确的语义操纵。