一种空间各异模糊核三维运动去模糊的方法及系统

    公开(公告)号:CN102270339A

    公开(公告)日:2011-12-07

    申请号:CN201110205589.5

    申请日:2011-07-21

    Applicant: 清华大学

    Abstract: 本发明公开了一种空间各异模糊核三维运动去模糊的方法及系统。该方法包括:步骤1,根据三维运动跟踪的结果,在成像曝光时间内得到时域上帧率为N倍的运动模型集合,N为相机个数;步骤2,通过插值算法计算出运动模型集合各顶点的连续运动路径;步骤3,统计每个时刻运动模型集合各顶点中的可见顶点;步骤4,计算每个时刻可见的面片集合;步骤5,将计算各可见面片在成像平面上的点扩散函数;步骤6,求解方程Ax=b,其中待求变量x为该成像曝光时间内所有可见的面片的纹理颜色,矩阵A为可见面片的点扩散函数,b为实际采集的图像。本发明能够针对包括空间各异复杂运动、遮挡与出现等复杂情况的大尺度运动模糊问题。

    基于光流场的平面视频转立体视频的方法

    公开(公告)号:CN100539710C

    公开(公告)日:2009-09-09

    申请号:CN200710117654.2

    申请日:2007-06-21

    Applicant: 清华大学

    Abstract: 本发明涉及基于光流场的平面视频转立体视频的方法,属于基于光流场的平面视频转立体视频的方法;该方法包括:计算给定一个平面视频序列每一帧的光流场:根据视差值正比于光流场矢量的绝对值,由当前帧的光流场中未被滤除的光流场矢量得到对应的点的视差值;将当前帧、当前帧与所述视差图合成得到新视图,作为当前帧的左、右视图;将每一帧的左、右视图合成得到立体视频帧;所有立体视频帧组成立体视频序列。本发明在方法复杂度和实现效果之间取得了良好的折衷,优点是实现起来非常简单。

    一种环形摄像机阵列校准系统及其方法

    公开(公告)号:CN101127128A

    公开(公告)日:2008-02-20

    申请号:CN200710121782.4

    申请日:2007-09-14

    Applicant: 清华大学

    Abstract: 本发明涉及一种环形摄像机阵列校准系统及其方法,属于计算机多媒体技术领域。该系统包括一个校准板、摄像机阵列、多个采集服务器、一个校准服务器以及网线;该方法包括:在环形场中全部摄像机对校准板每种位置姿态同时进行拍摄,采集一幅该位置姿态的图像;多个采集服务器分别对其所有采集到的图像进行角点检测,并计算每个摄像机的单应矩阵Hij;校准服务器根据两两摄像机之间可以检测到的公共位置姿态数为其之间的关系权重,将摄像机阵列优化分组;对每组摄像机分别进行组内联合校准,将各组的外参统一为以同一摄像机为世界坐标原点的外参;优化校准参数;得到摄像机阵列内外参数的最大似然估计。本发明可实现精确地重构三维场景,任意视点的观看。

    一种基于光场渲染的自由视点视频在IP网传输方法

    公开(公告)号:CN101022537A

    公开(公告)日:2007-08-22

    申请号:CN200610165243.6

    申请日:2006-12-15

    Applicant: 清华大学

    Abstract: 本发明涉及一种基于光场渲染的自由视点视频在IP网传输方法,属于计算机多媒体技术领域,该方法为:将每台电脑从摄像头采集来的视频进行压缩后的视频流作为一路视频流进行缓存;将用户所需要的多路视频流作为一路自由视点视频视频流进行传输,该传输方法包括:视频流缓存;建立连接准备服务,将用户及所需视频流标号放入相应的用户待服务列表,每个用户待服务列表中用户按照用户时间戳从早到晚排序;选取所有用户时间戳最早的用户按其视频流标号进行发送;当进行视频流切换时,服务器将用户待服务列表中用户的视频流标号修改为用户需要更换的视频流标号,然后发送。本发明解决了各路视频流之间在发送时的同步问题和发送端网络拥塞问题。

    一种快速几何建模方法及装置
    135.
    发明公开

    公开(公告)号:CN119494897A

    公开(公告)日:2025-02-21

    申请号:CN202411557870.9

    申请日:2024-11-04

    Applicant: 清华大学

    Inventor: 刘泊宁 刘烨斌

    Abstract: 本发明公开了一种快速几何建模方法及装置,本发明的方法包括提取人体模板动作序列所有帧的三维符号距离场信息,并进行处理得到数据矩阵;提取首帧人体动作的人体模板躯干骨架;根据人体模板躯干骨架对数据矩阵基于人体部位进行参数初始化;将参数输入基于二次核门函数的重建模型得到所有帧重建的符号距离场,利用期望值最大算法优化更新模型的参数,计算所有帧重建符号距离场和原始符号距离场的均方误差;利用均方误差的最小均方误差值对应的参数进行每一帧符号距离场的重建;对所有帧重建的符号距离场重建人体模板的三维网格。本发明能够有效建模三维人体动态几何,使人体动作的理解有着时空归纳泛化性。

    几何建模方法、装置、电子设备及存储介质

    公开(公告)号:CN118505935A

    公开(公告)日:2024-08-16

    申请号:CN202410955627.6

    申请日:2024-07-17

    Applicant: 清华大学

    Inventor: 刘泊宁 刘烨斌

    Abstract: 本公开提出一种几何建模方法,涉及数据处理领域。该方法包括:获取输入的原始三维几何网格,提取原始三维几何网格的原始符号距离场;基于原始符号距离场,初始化二次核模型的建模参数和网络训练的损失函数;通过三维卷积神经网络和全连接层网络对原始符号距离场进行网络训练,以优化二次核模型的建模参数,直至损失函数收敛,得到最优建模参数;基于最优建模参数重建符号距离场,使用行进立方体算法对符号距离场重建三维几何网格。本公开采用三维卷积神经网络和全连接层进行网络训练,实现最优的建模参数集选择,采用网络学习三维几何能够进行高精度数据量的表征建模,可以解决相关技术中隐式几何表征精度低,细节重建精度低的问题。

    基于扩散模型的单图像半身人体音频驱动方法和系统

    公开(公告)号:CN118212329A

    公开(公告)日:2024-06-18

    申请号:CN202410322636.1

    申请日:2024-03-20

    Applicant: 清华大学

    Abstract: 本发明提出一种基于扩散模型的单图像半身人体音频驱动方法和系统,其中方法包括通过获取第一数量的人体动作视频,基于人体动作视频得到第一关键点集合;利用第一关键点集合和人体动作视频的各帧图像训练生成模型;获取第二数量的音频演讲视频,基于音频演讲视频的各帧图像得到第二关键点集合;利用第二关键点集合和音频演讲视频的音频训练扩散模型;获取给定参考人体图像和给定音频;将给定音频输入训练好的扩散模型得到目标关键点集合,基于目标关键点集合、给定参考人体图像和训练好的生成模型生成目标视频,目标视频具有参考人体的外观且具有与给定音频相符的表情动作。利用本发明的方法能够基于单张人体图像实现对该人体的高保真音频驱动。

    一种基于多层高斯点云的可换装人体表征方法及系统

    公开(公告)号:CN118196259A

    公开(公告)日:2024-06-14

    申请号:CN202410297824.3

    申请日:2024-03-15

    Applicant: 清华大学

    Abstract: 本申请提出一种基于多层高斯点云的可换装人体表征方法及系统,所述方法包括:利用预先搭建的相机系统采集人体的多视角视频;获取视频中各帧的人体姿态特征图,并将各帧人体姿态特征图输入到单层高斯点云模型中,得到各帧对应的人体多通道图像,并确定各帧对应的第一人体高斯点云和第一衣服高斯点云;将各帧人体姿态特征图输入到预先训练好的多层高斯点云模型中,得到各帧人体姿态特征图对应的第二人体高斯点云、第二衣服高斯点云;更新第一人体高斯点云、第一衣服高斯点云;基于拉普拉斯坐标的形变方法将更新后的人体高斯点云和衣服高斯点云进行混合渲染,得到可驱动的换装渲染结果。本申请提出的技术方案,可生成真实感较高的驱动换装视频。

    目标地理区域人脸模板生成方法和装置

    公开(公告)号:CN111754557B

    公开(公告)日:2023-02-17

    申请号:CN202010472909.2

    申请日:2020-05-29

    Applicant: 清华大学

    Abstract: 本申请提出一种目标地理区域人脸模板生成方法和装置,方法包括:采集携带有纹理信息的目标地理区域三维人脸数据;将目标地理区域三维人脸数据与三维人脸模板贝塞尔人脸模型BFM进行初步对齐;利用非刚性最近点迭代算法,将BFM进行精细对齐和坐标归一化;对精细对齐和归一化后的BFM进行主元成分分析,得到用于表征人脸形状、表情、和纹理的参数和对应的参数‑顶点坐标矩阵。该方法生成的人脸模板准确度高,工作量小,成本低。

    一种物体的三维模型重建方法及电子设备

    公开(公告)号:CN115294268A

    公开(公告)日:2022-11-04

    申请号:CN202210834155.X

    申请日:2022-07-14

    Abstract: 本申请提供一种物体的三维模型重建方法及电子设备,用于提高重建的三维模型的准确率。包括:响应于用户触发的物体三维模型重建指令,获取与物体对应的多视角图像;对多视角图像分别进行分割,得到分割后的各图像;基于分割后的各图像和各图像对应的掩膜图像对所述物体的目标参数以及所述物体的类别对应的深度隐式模板DIT参数进行调整,得到调整后的目标参数和调整后的DIT参数;通过调整后的DIT参数对与所述物体的类别对应的初始三维模型的形状进行调整,得到候选三维模型,其中,所述初始三维模型为基于DIT参数以及所述物体对应的多视角图像得到的;利用调整后的目标参数对候选三维模型的颜色进行调整,得到所述物体的目标三维模型。

Patent Agency Ranking