公开(公告)号：CN117710578B

公开(公告)日：2024-07-02

申请号：CN202311709901.3

申请日：2023-12-13

Applicant: 重庆邮电大学

Inventor： 唐述 ,  何嘉宾 ,  龚煦 ,  蒋忱迅 ,  罗钧元 ,  任川渝

IPC: G06T17/00 ,  G06T15/50

Abstract: 本发明涉及一种同时实现表面重建和材质估计的多视图三维重建方法，属于三维重建技术领域。该方法在由几何MLP网络、Color MLP网络和Light MLP网络构成的神经网络中，该方法采用一种增强的低频到高频编码配准策略将场景的输入位置转换为高维傅里叶特征，以增加MLP网络输入数据的维数；使用NeRF公式和SDF权值来估计每一采样射线的表面点，更好地反映场景的几何形状和光照效果；在几何MLP网络中，通过一种基于体渲染的材料估计策略在每个表面点上估计材料的基色、粗糙度和金属度，实现材料估计。本发明提高了重建精度的同时，可同时获得物体的材质和三维信息，为基于图像的三维重建和材质估计开辟了一条新的途径。

公开(公告)号：CN117710578A

公开(公告)日：2024-03-15

申请号：CN202311709901.3

申请日：2023-12-13

Applicant: 重庆邮电大学

Inventor： 唐述 ,  何嘉宾 ,  龚煦 ,  蒋忱迅 ,  罗钧元 ,  任川渝

IPC: G06T17/00 ,  G06T15/50

Abstract: 本发明涉及一种同时实现表面重建和材质估计的多视图三维重建方法，属于三维重建技术领域。该方法在由几何MLP网络、Color MLP网络和Light MLP网络构成的神经网络中，该方法采用一种增强的低频到高频编码配准策略将场景的输入位置转换为高维傅里叶特征，以增加MLP网络输入数据的维数；使用NeRF公式和SDF权值来估计每一采样射线的表面点，更好地反映场景的几何形状和光照效果；在几何MLP网络中，通过一种基于体渲染的材料估计策略在每个表面点上估计材料的基色、粗糙度和金属度，实现材料估计。本发明提高了重建精度的同时，可同时获得物体的材质和三维信息，为基于图像的三维重建和材质估计开辟了一条新的途径。