表情生成方法、装置及电子设备、存储介质及程序产品

    公开(公告)号:CN114724228B

    公开(公告)日:2025-05-02

    申请号:CN202210475010.5

    申请日:2022-04-29

    Abstract: 本公开提供了一种表情生成方法、装置、电子设备、计算机可读存储介质及程序产品,涉及图像处理技术领域。该方法包括:获取人脸图像,确定人脸图像对应的第一表情参数与第二表情参数;第一表情参数与第二表情参数分别基于不同的表情提取方式得到,表情提取方式具有对应的表情基;获取预先构建的状态评价函数;状态评价函数基于各表情基关联的表情状态构建得到,表情状态为所对应的表情系数的语义描述;基于状态评价函数对第一表情参数与第二表情参数进行融合处理,得到融合表情参数,以根据融合表情参数驱动表情生成。本公开可以将不同表情提取方式得到的表情参数进行融合,使得确定出的表情参数同时具备鲁棒性与灵活性。

    视频生成方法、装置、电子设备及存储介质

    公开(公告)号:CN114255496B

    公开(公告)日:2025-04-11

    申请号:CN202111456805.3

    申请日:2021-11-30

    Abstract: 本公开提供了一种视频生成方法及装置,包括:得到表情迁移模型输出的初始视频;获取与初始视频中的视频帧对应的脸部渲染图和表情系数,脸部渲染图中的口腔区域绘制有虚拟牙齿;将视频帧对应的脸部渲染图和表情系数分别输入目标图像生成模型,得到目标图像生成模型输出的脸部处理图像;将各所述视频帧对应的脸部处理图像按照所述表情驱动视频的播放时间顺序组合,得到经过脸部处理的目标视频。本公开可以在保证目标视频的牙齿完整的基础上,提升了脸部纹理和牙齿纹理的真实自然程度,大大提升了目标视频的质量。

    三维头部网格生成方法、装置、电子设备和存储介质

    公开(公告)号:CN113902869B

    公开(公告)日:2025-02-25

    申请号:CN202010577142.X

    申请日:2020-06-22

    Abstract: 本公开关于三维头部网格生成方法、装置、电子设备和存储介质,所述方法包括:确定二维图像中的人脸关键点;将所述人脸关键点的第一坐标和预设标准三维头部网格中顶点的第二坐标输入到预先训练得到的三维头部重建模型中,以输出与所述二维图像中的人脸相对应的三维头部网格中顶点的第三坐标;根据多个所述第三坐标生成所述三维头部网格。根据本公开的技术方案,可以根据单张二维图像,自动构造三维头部网格,以便后续用于生成具体的纹理图像,既不需要预先构建可变形的三维人脸模型,也不需要人工绘制,节约了人力和时间。

    表情驱动模型的训练方法、表情驱动方法及对应装置

    公开(公告)号:CN119418383A

    公开(公告)日:2025-02-11

    申请号:CN202411545849.7

    申请日:2024-10-31

    Abstract: 本申请实施例公开了一种表情驱动模型的训练方法、表情驱动方法及对应装置。主要技术方案包括:获取包括多个第一训练样本的第一训练数据,所述第一训练样本至少包括:音频样本、与所述音频样本对应的表情控制数据以及表情参数真值,所述表情控制数据至少包括时序控制数据,所述时序控制数据包括所述音频样本的时序内至少一个时间窗口对应的动作类型序列;基于所述第一训练数据训练表情驱动模型,包括:将所述音频样本和与所述音频样本对应的表情控制参数作为所述表情驱动模型的输入,获取所述表情驱动模型输出的表情参数序列。本申请可以提高面部表情的精细化控制效果,使其表情变化更加丰富和生动。

    图像处理方法、装置、电子设备及存储介质

    公开(公告)号:CN113240814B

    公开(公告)日:2024-10-01

    申请号:CN202110518186.X

    申请日:2021-05-12

    Abstract: 本公开关于一种图像处理方法、装置、电子设备及存储介质,涉及图像处理技术领域。其中,方法包括:在获取到原始图像和目标图像后,分别对原始图像包含第一人脸图像和目标图像包含的第二人脸图像进行三维重建,得到第一人脸图像的原始三维人脸网格,及第二人脸图像中人脸的第一焦距和第一方向,根据第一焦距、第一方向和第一人脸图像,重建出第一人脸图像的目标三维人脸网格,根据原始三维人脸网格和目标三维人脸网格对第一人脸图像进行逐像素调整,以得到目标人脸图像。由此,基于三维重建的方式根据目标图像中人脸调整原始图像中人脸的方向和透视,使得调整得到的目标人脸图像的五官布局更加合理。

    一种虚拟对象的控制方法、装置、电子设备及存储介质

    公开(公告)号:CN113096235B

    公开(公告)日:2024-03-19

    申请号:CN202110256799.0

    申请日:2021-03-09

    Abstract: 本公开关于一种虚拟对象的控制方法、装置、电子设备及存储介质。方法包括:获取包含第一对象的第一图像,获取第一对象对应的三维模型的初始UV贴图,根据第一对象的轮廓和尺寸,将第一图像映射到初始UV贴图上,得到第一对象的UV贴图,在三维模型上显示第一对象的UV贴图,得到三维虚拟对象,获取三维虚拟对象的调整参数,调整参数包括形变参数、呼吸频率参数和晃动参数中的至少一种,根据调整参数对三维虚拟对象进行调整。本公开通过UV贴图的方式实现了包含对象的二维图像到三维虚拟对象的重建,操作简单,且方便拓展;并可以根据获取的调整参数实现对三维虚拟对象的调整,提高真实度和用户体验。

    表情生成方法、装置及电子设备、存储介质及程序产品

    公开(公告)号:CN114724228A

    公开(公告)日:2022-07-08

    申请号:CN202210475010.5

    申请日:2022-04-29

    Abstract: 本公开提供了一种表情生成方法、装置、电子设备、计算机可读存储介质及程序产品,涉及图像处理技术领域。该方法包括:获取人脸图像,确定人脸图像对应的第一表情参数与第二表情参数;第一表情参数与第二表情参数分别基于不同的表情提取方式得到,表情提取方式具有对应的表情基;获取预先构建的状态评价函数;状态评价函数基于各表情基关联的表情状态构建得到,表情状态为所对应的表情系数的语义描述;基于状态评价函数对第一表情参数与第二表情参数进行融合处理,得到融合表情参数,以根据融合表情参数驱动表情生成。本公开可以将不同表情提取方式得到的表情参数进行融合,使得确定出的表情参数同时具备鲁棒性与灵活性。

    三维头部网格生成方法、装置、电子设备和存储介质

    公开(公告)号:CN113902869A

    公开(公告)日:2022-01-07

    申请号:CN202010577142.X

    申请日:2020-06-22

    Abstract: 本公开关于三维头部网格生成方法、装置、电子设备和存储介质,所述方法包括:确定二维图像中的人脸关键点;将所述人脸关键点的第一坐标和预设标准三维头部网格中顶点的第二坐标输入到预先训练得到的三维头部重建模型中,以输出与所述二维图像中的人脸相对应的三维头部网格中顶点的第三坐标;根据多个所述第三坐标生成所述三维头部网格。根据本公开的技术方案,可以根据单张二维图像,自动构造三维头部网格,以便后续用于生成具体的纹理图像,既不需要预先构建可变形的三维人脸模型,也不需要人工绘制,节约了人力和时间。

    人脸融合方法、装置、电子设备、存储介质及程序产品

    公开(公告)号:CN113160099A

    公开(公告)日:2021-07-23

    申请号:CN202110290169.5

    申请日:2021-03-18

    Inventor: 杨丽倩 刘晓强

    Abstract: 本公开关于一种人脸融合方法、装置、电子设备、存储介质及程序产品。该人脸融合方法包括:对原始人脸图和目标人脸图分别进行模糊得到第一原始人脸模糊图和第一目标人脸模糊图;对根据原始人脸图和目标人脸图所分别生成的人脸纯白图进行模糊处理,得到原始人脸图和目标人脸图各自的纯白模糊图;通过原始人脸图的纯白模糊图对第一原始人脸模糊图进行图像分解得到第二原始人脸模糊图,以及通过目标人脸图的纯白模糊图对第一目标人脸模糊图进行图像分解得到第二目标人脸模糊图;通过第二原始人脸模糊图对原始人脸图进行图像分解得到原始人脸细节图;将原始人脸细节图融合至第二目标人脸模糊图得到人脸融合图。通过本公开可以提升人脸融合的速度。

Patent Agency Ranking