公开(公告)号：CN115690908A

公开(公告)日：2023-02-03

申请号：CN202211334365.9

申请日：2022-10-28

Applicant: 中国科学院上海微系统与信息技术研究所

Inventor： 王寅彤 ,  陈利利 ,  李嘉茂 ,  张晓林

IPC: G06V40/20 ,  G06V10/82 ,  G06V10/44 ,  G06V10/42 ,  G06V20/70 ,  G06V10/766 ,  G06V10/77 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/048

Abstract: 本发明涉及一种基于拓扑感知的三维手势姿态估计方法，包括以下步骤：获取三维手势姿态的单张深度图；将所述单张深度图输入至三维手势姿态估计网络，得到手势姿态的三维关节点坐标信息；其中，所述三维手势姿态估计网络包括：特征提取模块，用于提取所述单张深度图的图像局部特征，并转换为特征序列；编码器模块，用于捕捉基于所述特征序列的全局上下文信息；解码器模块，用于基于所述全局上下文信息确定关节节点间的关系；拓扑感知回归模块，用于提取所述解码器模块中每一层的语义信息得到手势姿态的三维关节点坐标信息。本发明在面临自遮挡自相似问题时可实现准确、鲁棒的三维手势关节点位置的预测。