公开(公告)号：CN113129347B

公开(公告)日：2023-12-12

申请号：CN202110453009.8

申请日：2021-04-26

Applicant: 南京大学

Inventor： 于耀 ,  潘霄禹 ,  周余 ,  都思丹

IPC: G06F30/27 ,  G06T7/521

Abstract: 本发明涉及一种自监督单视图三维发丝模型重建方法及系统，获取肖像图像样本的发型区域占用图、发丝纹理方向图和投影视角，构建初始的单视图3D发型重建网络，以发型区域占用图和2D占用图的对应像素的差值以及发丝纹理方向图和2D方向图的对应像素的差值构建损失函数，对初始的单视图3D发型重建网络进行训练，最后将待重建肖像图像输入训练好的单视图3D发型重建网络，获得3D数字化发型。本发明在网络训练时无需2D到3D的真实数据对做监督，而是利用单张照片作为输入，借助可微分体积场重投影，将三维数据映射回二维，以输入本身作为约束，完成自监督，利用训练好的单视图3D发型重建网络实现了一种端到端的三维发型重建，让用(56)对比文件刘海舟等.基于头皮层特征点的三维头发重用方法《.计算机应用》.2014,第34卷(第10期),全文.Ligang Cheng等.Automatic HairModeling from One Image《.2019International Conference on VirtualReality and Visualization (ICVRV)》.2020,全文.赵青;余元辉;蔡囯榕.融合表观与曲率特征的三维点云眉毛提取.集美大学学报(自然科学版).2020,(03),全文.

公开(公告)号：CN113129347A

公开(公告)日：2021-07-16

申请号：CN202110453009.8

申请日：2021-04-26

Applicant: 南京大学

Inventor： 于耀 ,  潘霄禹 ,  周余 ,  都思丹

IPC: G06T7/521 ,  G06T7/11 ,  G06T15/00 ,  G06T17/10 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明涉及一种自监督单视图三维发丝模型重建方法及系统，获取肖像图像样本的发型区域占用图、发丝纹理方向图和投影视角，构建初始的单视图3D发型重建网络，以发型区域占用图和2D占用图的对应像素的差值以及发丝纹理方向图和2D方向图的对应像素的差值构建损失函数，对初始的单视图3D发型重建网络进行训练，最后将待重建肖像图像输入训练好的单视图3D发型重建网络，获得3D数字化发型。本发明在网络训练时无需2D到3D的真实数据对做监督，而是利用单张照片作为输入，借助可微分体积场重投影，将三维数据映射回二维，以输入本身作为约束，完成自监督，利用训练好的单视图3D发型重建网络实现了一种端到端的三维发型重建，让用户快速获取发型重建结果。