公开(公告)号：CN113808006B

公开(公告)日：2023-05-23

申请号：CN202111019790.4

申请日：2021-09-01

Applicant: 南京信息工程大学

Inventor： 张小瑞 ,  蒋炎 ,  孙伟 ,  孙星明 ,  徐枫

IPC: G06T3/00 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明公开了一种基于二维图像重建三维网格模型的方法及装置，所述方法包括：输入二维图像到ResNet50中，通过ResNet50的Stage1，Stage2和Stage3提取图像二维信息，对这些信息进行特征连接；通过相机参数计算输入图像平面的2D投影，然后通过双线性插值法得到感知特征；通过隐式曲面算法生成初始椭球，从输入二维图像中汇集图像特征，结合图像特征和感知特征进行网格变形；通过上采样细化网格模型；利用损失函数促使系统生成粗略的三维模型；进行二次变换、三次变换生成较精细三维模型和精细的三维模型。本发明通过初始椭球进行三次变换，能够学习网格的多尺度和上下文信息，生成更加精细的三维模型。

公开(公告)号：CN113808006A

公开(公告)日：2021-12-17

申请号：CN202111019790.4

申请日：2021-09-01

Applicant: 南京信息工程大学

Inventor： 张小瑞 ,  蒋炎 ,  孙伟 ,  孙星明 ,  徐枫

IPC: G06T3/00 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种基于二维图像重建三维网格模型的方法及装置，所述方法包括：输入二维图像到ResNet50中，通过ResNet50的Stage1，Stage2和Stage3提取图像二维信息，对这些信息进行特征连接；通过相机参数计算输入图像平面的2D投影，然后通过双线性插值法得到感知特征；通过隐式曲面算法生成初始椭球，从输入二维图像中汇集图像特征，结合图像特征和感知特征进行网格变形；通过上采样细化网格模型；利用损失函数促使系统生成粗略的三维模型；进行二次变换、三次变换生成较精细三维模型和精细的三维模型。本发明通过初始椭球进行三次变换，能够学习网格的多尺度和上下文信息，生成更加精细的三维模型。