一种三维视频融合标定及实时渲染的方法及装置

    公开(公告)号:CN115641379A

    公开(公告)日:2023-01-24

    申请号:CN202211219259.6

    申请日:2022-09-30

    摘要: 本发明公开了一种三维视频融合标定及实时渲染的方法及装置,所述方法包括:获取视频帧图像,进行畸变校正,保存进行畸变校正的畸变参数;分别在所述视频帧图像及所述视频帧图像对应三维场景的画面位置中选取多个特征点,对所述视频帧图像与所述三维场景的画面位置进行配准;获取拍摄所述视频的相机的初始内参,通过优化求解的方式,求出最优内参;基于所述最优内参,确定所述相机相对世界坐标系原点的旋转、平移向量;确定所述相机在三维场景中的世界坐标和旋转角度,将畸变校正后的图像以纹理投影的方式,投影到所述三维场景的画面位置对应的三维面片上。本方法即使在内参模板差别较大的情况下,也可以快速找到合适的内参,保证了投射的准确性。