-
公开(公告)号:CN119338966A
公开(公告)日:2025-01-21
申请号:CN202411874568.6
申请日:2024-12-19
Applicant: 浙江大学
IPC: G06T15/00 , G06T17/00 , G06V10/75 , G06V10/774
Abstract: 本发明公开了一种基于高斯溅射的四维高斯模型生成方法、系统及设备,属于计算机视觉处理领域。本发明的方法首先使用预训练的文本到视频扩散模型生成与给定的文本提示一致的目标视频,然后由图像‑网格生成模型将目标视频逐帧转化为一个三维网格模型,对三维网格模型在主视角下的焦距范围内进行渲染,以计算渲染匹配焦距,采用高斯溅射方法训练初始时刻的静态高斯模型,而后训练形变网络,最终由训练好的静态高斯模型和形变网络生成给定时间戳下的四维高斯模型。本发明的方法可以在用明显短的时间内,生成生动的、纹理精细的、几何关系准确的且准确符合用户输入文字语义的高动态4D模型。