公开(公告)号：CN118573978A

公开(公告)日：2024-08-30

申请号：CN202410680197.1

申请日：2024-05-29

Applicant: 浙江大学

Inventor： 赵磊 ,  焦涵 ,  贾世安 ,  林怀忠 ,  孙嘉锴 ,  尹浩霖 ,  蓝泽铧 ,  莫俊程 ,  马骋 ,  张权威 ,  王永康 ,  陈嘉芙 ,  褚天易 ,  饶晨 ,  张占杰 ,  李光远 ,  张玮婧 ,  王欣宇 ,  邢卫

IPC: H04N21/8549 ,  H04N21/81 ,  G06T15/00 ,  G06T17/00

Abstract: 本申请涉及一种基于3D高斯的高效流式传输的低比特率自由视点视频生成方法、计算机设备、可读存储介质和程序产品。生成方法包括：构建基于3D高斯的三维场景，3D高斯包括在初始帧构建的结构化3D高斯、以及在后续帧出现的自由3D高斯，3D高斯具有源于结构化3D高斯的第一类位置点、以及源于自由3D高斯的第二类位置点；将每个锚点关联至相应组别内所有的第一类位置点，使被关联的第一类位置点依附于相应的锚点；对于任意一组，获得锚点自身信息、以及关联信息，将二者映射至结构化3D高斯的协方差矩阵；逐帧优化3D高斯，包括间接优化第一类位置点及其属性、以及直接优化第二类位置点及其属性，渲染得到后续帧图像。