公开(公告)号：CN119547111A

公开(公告)日：2025-02-28

申请号：CN202380052835.9

申请日：2023-07-10

Applicant: 三星电子株式会社

Inventor： S·拉维钱德兰 ,  D·P·迪内夫 ,  O·特克斯勒 ,  A·古普塔 ,  J·C·帕兰 ,  H·J·姜 ,  A·S·J-Y·利奥 ,  S·萨迪

IPC: G06T13/40 ,  G06T13/20 ,  G06T5/50 ,  G06V40/16 ,  G06N20/00 ,  G10L21/10

Abstract: 多模态解纠缠可以包括生成与人脸相对应的一组剪影图像，该生成解除由每个剪影图像描绘的人脸的上部和下部之间的相关性。单模态机器学习模型可以利用该组剪影图像来训练。如经训练的，单模态机器学习模型可以生成人脸的合成图像。由经训练的单模态机器学习模型生成的合成图像可以用于训练多模态渲染网络。多模态渲染网络可以被训练为生成语音动画数字人。训练多模态渲染网络可以是基于最小化合成图像与由多模态渲染网络生成的图像之间的差异的。

公开(公告)号：CN119343703A

公开(公告)日：2025-01-21

申请号：CN202380044874.4

申请日：2023-04-13

Applicant: 三星电子株式会社

Inventor： S·拉维钱德兰 ,  A·S·J-Y·利奥 ,  D·P·迪内夫 ,  O·特克斯勒 ,  H·J·姜 ,  J·C·帕兰 ,  S·萨迪

IPC: G06T13/40 ,  G06T13/20 ,  G10L21/10 ,  G06N3/0455 ,  G06N3/0464

Abstract: 根据嘴形数据创建唇部运动的图像和动画包括将多个系数的矢量作为一个或多个输入特征提供给神经网络模型。多个系数的每个矢量对应于不同的嘴形。使用神经网络模型，生成指定嘴部的视觉表示的数据结构输出，该嘴部包括具有对应于矢量的形状的唇部。