公开(公告)号：CN118918632A

公开(公告)日：2024-11-08

申请号：CN202410579993.6

申请日：2024-10-10

Applicant: 兰州交通大学

Inventor： 王文润 ,  党建武 ,  王阳萍 ,  罗维亮 ,  胡瑶 ,  梁超 ,  周雯晴 ,  杨旭

IPC: G06V40/20 ,  G06V40/10 ,  G06V10/44 ,  G06V10/80 ,  G06V10/776 ,  G06N3/045 ,  G06N3/0464

Abstract: 本发明涉及交互姿态模型构建技术领域，具体公开了一种联合骨骼特征的双分支手部交互姿态估计模型，包括以下步骤：S1、数据源输入单元：首先，将手部区域深度图像送入到一个手部特征提取网络的粗糙手势特征获取单元，首先由一个7×7的卷积层得到粗略手部特征，然后再通过精细手势特征获取单元得到于初始分辨率下相对精细的手部特征。本发明中，通过Swin Transformer和CNN分别捕获全局特征和局部关节点特征，融合后添加一个二维高斯热图监督修正来进行特征提取，通过这种方法，可以提高手部姿态估计方法的效果，并在实际应用中获得更好的性能。