图像生成方法及装置、存储介质和电子设备

    公开(公告)号:CN115100360B

    公开(公告)日:2023-12-01

    申请号:CN202210903807.0

    申请日:2022-07-28

    Inventor: 张琦 刘巧俏 邹航

    Abstract: 本公开提供了一种图像生成方法、图像生成装置、存储介质和电子设备,涉及图像处理技术领域。该图像生成方法包括:获取与待生成图像对应的相机位姿,根据相机位姿确定与待生成图像中各像素点对应的射线;针对每条射线上的采样点,根据采样点的位置信息确定采样点的特征信息,特征信息根据输入图像上与采样点的位置信息对应的像素点的融合特征信息确定出,融合特征信息包括色彩特征信息和深度特征信息;根据采样点的位置信息和特征信息,确定采样点的色彩信息和密度信息;利用射线上各采样点的色彩信息和密度信息,确定待生成图像中与射线对应的像素点的色彩信息,以生成待生成图像。本

    三维人体重建方法、装置、计算机可读介质及电子设备

    公开(公告)号:CN115346000A

    公开(公告)日:2022-11-15

    申请号:CN202211056471.5

    申请日:2022-08-31

    Abstract: 本申请属于三维重建技术领域,具体涉及一种三维人体重建方法、装置、计算机可读介质及电子设备。该方法包括获取二维人体图像;将二维人体图像输入姿态估计网络,得到二维人体关节信息,并将二维人体关节信息输入身体卷积网络,得到身体参数信息;基于二维人体关节信息,对二维人体图像进行分割得到手部图像和头部图像;将手部图像输入双手图卷积网络,得到手部参数信息,以及将头部图像输入头部图卷积网络,得到头部参数信息;将手部参数信息、头部参数信息以及身体参数信息进行整合,以重建得到三维人体模型。这样,对于手部或者头部被遮挡的情况下,通过对手部图像和头部图像进行重构,从而有利于准确重建出具有准确形态的三维人体模型。

    图像重建方法及装置、计算机存储介质、电子设备

    公开(公告)号:CN115205117A

    公开(公告)日:2022-10-18

    申请号:CN202210787481.X

    申请日:2022-07-04

    Inventor: 邹航 刘巧俏 张琦

    Abstract: 本公开涉及图像处理技术领域,提供了一种图像重建方法、图像重建装置、计算机存储介质、电子设备,其中,图像重建方法包括:对获取到的低分辨率图像进行编码,得到所述低分辨率图像的编码向量;所述低分辨率图像为分辨率低于预设分辨率阈值的图像;从所述编码向量中提取所述低分辨率图像中每个像素点的视觉特征及空间位置特征;对所述空间位置特征进行空间编码,得到空间编码向量;对所述每个像素点的视觉特征和所述空间编码向量进行解码,获得所述低分辨率图像对应的超分辨率图像;所述超分辨率图像的分辨率高于所述低分辨率图像。本公开中的方法使得重建出的超分辨率图像轮廓更加清晰,减少伪影的产生。

    图像生成方法及装置、存储介质和电子设备

    公开(公告)号:CN115100360A

    公开(公告)日:2022-09-23

    申请号:CN202210903807.0

    申请日:2022-07-28

    Inventor: 张琦 刘巧俏 邹航

    Abstract: 本公开提供了一种图像生成方法、图像生成装置、存储介质和电子设备,涉及图像处理技术领域。该图像生成方法包括:获取与待生成图像对应的相机位姿,根据相机位姿确定与待生成图像中各像素点对应的射线;针对每条射线上的采样点,根据采样点的位置信息确定采样点的特征信息,特征信息根据输入图像上与采样点的位置信息对应的像素点的融合特征信息确定出,融合特征信息包括色彩特征信息和深度特征信息;根据采样点的位置信息和特征信息,确定采样点的色彩信息和密度信息;利用射线上各采样点的色彩信息和密度信息,确定待生成图像中与射线对应的像素点的色彩信息,以生成待生成图像。本公开可以提升生成新视角图像的效果。

    图像生成方法、装置、电子设备及计算机可读存储介质

    公开(公告)号:CN115063536A

    公开(公告)日:2022-09-16

    申请号:CN202210770690.3

    申请日:2022-06-30

    Inventor: 张琦 刘巧俏 邹航

    Abstract: 本公开提供了一种图像生成方法、装置、电子设备及计算机可读存储介质,涉及图像处理技术领域。包括:获取目标图像的风格控制内容;根据第一神经网络从风格控制内容中提取n对第一形状编码和第一外观编码;获取n对第二形状编码和第二外观编码;根据n对第一形状编码和第一外观编码,以及n对第二形状编码和第二外观编码,生成n对第三形状编码和第三外观编码;获取与目标图像对应的空间点的位置编码;根据位置编码以及n对第三形状编码和第三外观编码,生成n个第一特征域;根据第二神经网络对n个第一特征域进行处理,得到目标图像。此种方式,使得用户可以通过输入风格控制内容实现对目标图像的风格的控制,并可以生成实际不存在的虚拟图像。

    通用三维模型重建方法及装置、存储介质及电子设备

    公开(公告)号:CN114299252A

    公开(公告)日:2022-04-08

    申请号:CN202111651821.8

    申请日:2021-12-30

    Inventor: 张琦 刘巧俏 邹航

    Abstract: 本公开提供了一种通用三维模型重建方法及装置、存储介质及电子设备,涉及三维重建技术技术领域。通用三维模型重建方法,包括:获取待重建的第一点云数据;提取第一点云数据的基本特征信息和形状特征信息;将第一点云数据的基本特征信息和形状特征信息,输入到预先训练好的动态神经网络中,输出第一点云数据的三维模型,其中,动态神经网络是将点云数据的基本特征信息和形状特征信息、符号距离函数SDF值作为训练数据得到的。本公开使用实时获取的符号距离函数SDF值,结合特征信息,组成动态的结构,提高了动态神经网络的复用性,使得三维重建方法具备通用性、实时性。

    三维物体的图像渲染方法、装置及电子设备

    公开(公告)号:CN114863007B

    公开(公告)日:2024-12-27

    申请号:CN202210556554.4

    申请日:2022-05-20

    Inventor: 张琦 刘巧俏 邹航

    Abstract: 本公开实施例提供了一种三维物体的图像渲染方法、装置及电子设备,该方法包括:获取针对目标物体的目标视角信息;基于目标视角信息,确定对目标物体进行渲染时所利用的各个空间采样点的位置信息;利用预先训练完成的神经渲染网络,基于每一空间采样点的位置信息,以及目标物体的各个待利用图像的特征图,生成每一空间采样点的颜色信息;基于每一空间采样点的颜色信息,生成目标物体的渲染图像。通过本方案,可以解决相关技术中利用神经渲染网络进行图像渲染时不具备通用性的问题。

    图像生成方法、装置、电子设备及计算机可读存储介质

    公开(公告)号:CN115063536B

    公开(公告)日:2023-10-10

    申请号:CN202210770690.3

    申请日:2022-06-30

    Inventor: 张琦 刘巧俏 邹航

    Abstract: 本公开提供了一种图像生成方法、装置、电子设备及计算机可读存储介质,涉及图像处理技术领域。包括:获取目标图像的风格控制内容;根据第一神经网络从风格控制内容中提取n对第一形状编码和第一外观编码;获取n对第二形状编码和第二外观编码;根据n对第一形状编码和第一外观编码,以及n对第二形状编码和第二外观编码,生成n对第三形状编码和第三外观编码;获取与目标图像对应的空间点的位置编码;根据位置编码以及n对第三形状编码和第三外观编码,生成n个第一特征域;根据第二神经网络对n个第一特征域进行处理,得到目标图像。此种方式,使得用户可以通过输入风格控制内容实现对目标图像的风格的控制,并可以生成实际不存在的虚拟图像。

    基于视频序列的三维人体重建方法及相关设备

    公开(公告)号:CN116188684A

    公开(公告)日:2023-05-30

    申请号:CN202310004845.7

    申请日:2023-01-03

    Abstract: 本公开提供了一种基于视频序列的三维人体重建方法及相关设备,涉及三维重建技术领域。该方法包括:将目标人物的多帧图像输入预设的生成器,确定第一三维人体;将真实三维数据与第一三维人体输入判别器,确定第二三维人体;将目标人物的多帧图像输入预设的神经网络编码器,确定相机参数;根据相机参数与第二三维人体,确定重建三维人体。本公开能够准确地重建出被遮挡部分的人的姿态和形状。

Patent Agency Ranking