非漫反射表面实时渲染方法及装置

    公开(公告)号:CN118429499A

    公开(公告)日:2024-08-02

    申请号:CN202410314953.9

    申请日:2024-03-19

    申请人: 浙江大学

    IPC分类号: G06T15/00 G06T17/20 G06N3/08

    摘要: 本发明公开了一种非漫反射表面实时渲染方法及装置,其包括:利用神经网络对初始网格的形状进行优化,并对优化后的网格结合输入图片的观察视角进行可微光栅化;对每个观察视角前景区域内的像素着色得到对应观察视角下的渲染图片;利用梯度下降法优化神经网络的权重;并结合观察视角方向,利用网格、环境贴图、法向量贴图、镜面反射颜色特征贴图、漫反射颜色贴图、着色神经网络在任意给定视角渲染得到渲染图片。采用本发明技术,可以实现实时交互的新视点合成任务,逼真地重建非漫反射表面的形状和外观。