公开(公告)号：CN114821099B

公开(公告)日：2025-04-22

申请号：CN202210370621.3

申请日：2022-04-10

Applicant: 复旦大学 ,  之江实验室

Inventor： 金城 ,  张子墨 ,  吴渊 ,  程乐超

IPC: G06V10/44 ,  G06V10/82 ,  G06V10/766 ,  G06V40/10 ,  G06N3/0455

Abstract: 本发明属于计算机视觉领域，具体涉及一种基于Transformer的多视角3D姿态估计系统。该系统按照处理流程先后顺序分为单视角时空Transformer特征提取模块和多视角Transformer特征交换模块两个部分。单视角时空Transformer特征提取模块对输入的多视角姿态序列提取不同视角的时空域特征信息；多视角Transformer特征交换模块，将不同视角的时空域特征信息两两交换，然后经过回归头输出最终的3D姿态估计结果。本发明能充分利用姿态序列间的时间上下文和空间关系，在不同视角间充分进行特征交换和传输，提高了3D姿态估计结果的准确度。

公开(公告)号：CN114821099A

公开(公告)日：2022-07-29

申请号：CN202210370621.3

申请日：2022-04-10

Applicant: 复旦大学 ,  之江实验室

Inventor： 金城 ,  张子墨 ,  吴渊 ,  程乐超

IPC: G06V10/44 ,  G06V10/82 ,  G06V10/766 ,  G06V40/10 ,  G06N3/04

Abstract: 本发明属于计算机视觉领域，具体涉及一种基于Transformer的多视角3D姿态估计系统。该系统按照处理流程先后顺序分为单视角时空Transformer特征提取模块和多视角Transformer特征交换模块两个部分。单视角时空Transformer特征提取模块对输入的多视角姿态序列提取不同视角的时空域特征信息；多视角Transformer特征交换模块，将不同视角的时空域特征信息两两交换，然后经过回归头输出最终的3D姿态估计结果。本发明能充分利用姿态序列间的时间上下文和空间关系，在不同视角间充分进行特征交换和传输，提高了3D姿态估计结果的准确度。