公开(公告)号：CN115830241A

公开(公告)日：2023-03-21

申请号：CN202211642002.1

申请日：2022-12-20

申请人： 上海大学

发明人： 黄东晋 ,  奚勇杰 ,  石永生 ,  刘雨霏

IPC分类号： G06T17/00 ,  G06T11/40 ,  G06T15/20 ,  G06V10/774 ,  G06V10/82 ,  G06V10/766 ,  G06N3/088

摘要： 本发明涉及一种基于神经网络的真实感三维人脸纹理重建方法。首先，对于收集的人脸图像通过人脸检测网络定位人脸区域，并通过拓展缩放操作得到256×256的人脸图像。其次，把处理过的人脸图像输入搭建好的网络模型，依次获取三维人脸几何、残缺的人脸纹理图和完整的人脸纹理。最终，可由三维人脸几何、人脸反照率图和环境光渲染得到渲染图，并计算渲染图和输入人脸图像的差异，实现自监督学习。与现有的技术相比，该方法在L1距离、图像峰值信噪比、图像结构相似性以及人脸余弦距离指标上都获得了最好结果。同时，由于在模型内部分离了图像光照，所以可以实现人脸重光照应用。