公开(公告)号：CN117953586A

公开(公告)日：2024-04-30

申请号：CN202410191356.1

申请日：2024-02-21

Applicant: 北京信息科技大学

Inventor： 黄宏博 ,  郑曜林 ,  闫晓旭 ,  李萌 ,  许龙飞 ,  黄林凯 ,  张鑫

IPC: G06V40/20 ,  G06V10/764 ,  G06V10/44

Abstract: 本发明提供了一种基于时空轨迹图(JTG,Joints Trajectory Graph)的人体动作识别方法，属于人体动作识别领域，包括：数据处理、位置编码、图结构编码、时序编码和动作分类。本发明使用JTG作为输入数据表示，使得模型充分利用了轨迹信息来丰富节点及其跨帧交互的特征聚合能力。提出了Spatio‑Temporal Dijkstra Attention(STDA)模块，利用关节点间的最短路径进行空间信息整合的方法，使得模型能够捕获其中蕴含的拓扑结构，增强了模型的鲁棒性和泛化能力。进而结合了Koopman算子进行动作分类，使得模型获得了更全面的视角和更卓越的分类性能。