基于深度学习的新视角场景合成方法和装置

    公开(公告)号:CN109903393A

    公开(公告)日:2019-06-18

    申请号:CN201910133353.1

    申请日:2019-02-22

    Applicant: 清华大学

    Inventor: 徐枫 唐瑞杰 杨东

    Abstract: 本申请提出基于深度学习的新视角场景合成方法和装置,其中,方法包括:通过控制相机在训练场景下按照预设圆轨道旋转,每旋转预设角度对所述训练场景拍摄一张图像得到训练图像集,获取训练图像集中N张连续训练图像中第一张训练图像和第N张训练图像及其对应的相机位置参数信息;通过计算得到第一张训练图像和第N张训练图像的图像特征以对场景合成模型进行训练,根据合成场景图像和真实训练场景图像对应的损失函数值对场景合成模型的网络参数进行调整,以完成对场景合成模型的训练。由此,通过训练场景中的训练图像的不同图像特征对场景合成模型进行训练,提高了场景合成的准确度。

    基于深度学习的人脸三维特征点检测方法及系统

    公开(公告)号:CN109902616A

    公开(公告)日:2019-06-18

    申请号:CN201910138641.6

    申请日:2019-02-25

    Applicant: 清华大学

    Inventor: 徐枫 王至博 杨东

    Abstract: 本发明公开了一种基于深度学习的人脸三维特征点检测方法及系统,其中,该方法包括:建立人脸数据集,通过人脸三维重建对人脸数据集中的人脸图片进行处理获取人脸几何;在人脸模板上标定特定顶点为特征点,建立人脸图片与其对应的人脸三维特征点构成的数据集;训练输入为人脸图片,且输出为人脸三维特征点坐标的分布热度图的深度神经网络;训练时采用生成对抗网络以利用鉴别网络,输入为人脸图片和三维特征点分布热度图,输出真假值表示输入的人脸图片和三维特征点分布热度图是否配套,以通过训练后的神经网络得到检测结果。该方法可以检测图片中人脸特征点的三维坐标,且人脸边缘点与人脸模型之间具有很强的联系,使得人脸重建结果更为准确。

Patent Agency Ranking