公开(公告)号：CN117333604A

公开(公告)日：2024-01-02

申请号：CN202311372550.1

申请日：2023-10-23

Applicant: 杭州电子科技大学

Inventor： 王子梦 ,  顾晓玲 ,  吴子朝 ,  匡振中 ,  俞俊

IPC: G06T15/06 ,  G06T15/08 ,  G06T13/40 ,  G06V40/16 ,  G06N3/045 ,  G06N3/084

Abstract: 本发明公开了一种基于语义感知神经辐射场的人物面部重演方法，包括如下步骤：步骤(1)收集任务的数据，并对数据进行预处理，进而构建数据集；步骤(2)构建基于语义感知的神经辐射场网络模型，步骤(3)利用反向传播算法的基于语义感知的神经辐射场网络模型的参数进行训练，直至整个模型收敛，所述参数的训练是在最小化光度损失和语义损失下，利用预处理后的数据集训练；步骤(4)应用完成训练后的基于语义感知的神经辐射场网络模型生成对应的人脸图像。该方法将表情和姿态参数作为语义感知神经辐射场的输入，精准地控制人物重演图像的生成。经过在NeRFace数据集上的实验验证，取得了出色的定量和定性结果。