公开(公告)号：CN119205943A

公开(公告)日：2024-12-27

申请号：CN202411152864.5

申请日：2024-08-21

Applicant: 浙江大学

Inventor： 赵磊 ,  马骋 ,  林怀忠 ,  张占杰 ,  李光远 ,  孙嘉锴 ,  尹浩霖 ,  蓝泽铧 ,  莫竣程 ,  张权威 ,  王永康 ,  陈嘉芙 ,  褚天易 ,  饶晨 ,  焦涵 ,  贾世安 ,  张玮婧 ,  邢卫

IPC: G06T9/00 ,  G06T17/00 ,  G06T15/00

Abstract: 本申请涉及一种基于多分辨率码本的三维动态场景压缩方法、计算机设备和程序产品，三维动态场景压缩方法包括：利用同一动态场景不同时刻不同视角下的输入视图，重建获得基于空间中3D高斯点的三维动态场景，各3D高斯点具有高斯点属性；根据输入视图、以及相同时刻相同视角下三维场景的渲染图像，优化高斯点属性；将高斯点位置和动态场景时间均作为输入，获取高斯点属性变化量，将高斯点属性变化量叠加至高斯点属性，获得不同时刻的三维场景；根据变形场特征平面的分辨率数量对应地提供多个特征码本，特征码本用于与变形场特征平面同步地优化，特征码本的特征码本值用于与相应分辨率下的变形场特征平面中的特征值进行一对多的映射和替换。

公开(公告)号：CN118967915A

公开(公告)日：2024-11-15

申请号：CN202411041680.1

申请日：2024-07-31

Applicant: 浙江大学

Inventor： 尹浩霖 ,  赵磊 ,  林怀忠 ,  邢卫 ,  张权威 ,  张占杰 ,  李光远 ,  孙嘉锴 ,  蓝泽铧 ,  莫俊程 ,  马骋 ,  王永康 ,  陈嘉芙 ,  褚天易 ,  饶晨 ,  焦涵 ,  贾世安 ,  张玮婧

IPC: G06T15/20 ,  G06V10/774 ,  G06V10/82 ,  G06N3/09

Abstract: 本申请涉及一种基于2D先验的3D高斯场景风格迁移方法、计算机设备和计算机程序产品，包括：利用3D场景多视角的原始图像集，构建3D高斯；对3D高斯进行图像渲染，获得与原始图像集的视角相对应的渲染图像集；利用预期的风格图像，对渲染图像集内的渲染图像执行风格迁移，获得与渲染图像内容结构相同的风格化图像；利用风格化图像对应替换原始图像集中相应视角的图像，替换完成后组成监督图像集；比较监督图像集和渲染图像集内相同视角下图像的差异损失优化3D高斯。本申请可利用二维风格迁移方法的先验知识获得风格化图像，继而通过差异损失优化3D高斯，将风格化图像的风格信息转移到3D高斯场景中，实现3D高斯的场景风格迁移。

公开(公告)号：CN118505498A

公开(公告)日：2024-08-16

申请号：CN202410680199.0

申请日：2024-05-29

Applicant: 浙江大学

Inventor： 赵磊 ,  张权威 ,  林怀忠 ,  张占杰 ,  李光远 ,  孙嘉锴 ,  尹浩霖 ,  蓝泽铧 ,  莫俊程 ,  马骋 ,  王永康 ,  陈嘉芙 ,  褚天易 ,  饶晨 ,  焦涵 ,  贾世安 ,  张玮婧 ,  邢卫

IPC: G06T3/04 ,  G06T5/70 ,  G06T5/60 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/08

Abstract: 本申请涉及一种基于预训练扩散模型的二维图像风格迁移方法、计算机设备、可读存储介质和程序产品，方法包括：基于内容图像获得内容潜变量，基于风格图像获得风格潜变量，基于内容潜变量获得初始潜变量；将内容潜变量、风格潜变量和初始潜变量，三者同时输入预训练扩散模型，基于内容查询特征、风格键特征和风格值特征获得加权后的风格值特征，加权后的风格值特征用于在每轮解码过程中预测噪声；在预训练扩散模型的解码过程中，基于内容潜变量获得经过自注意力层内残差块输出的第一结果特征，基于初始潜变量获得经过自注意力层内残差块输出的第二结果特征；利用对比损失，约束和引导解码过程，使初始潜变量完成多轮地去除噪声后生成风格化图像。