-
公开(公告)号:CN115830707A
公开(公告)日:2023-03-21
申请号:CN202211440742.7
申请日:2022-11-17
Applicant: 北京工业大学
IPC: G06V40/20 , G06V20/40 , G06V10/82 , G06V10/774 , G06V10/34 , G06V10/40 , G06N3/0464 , G06N3/08
Abstract: 本发明提供一种基于超图学习的多视角人体行为识别方法,包括从P个视角获取视频数据,还包括以下步骤:对所述视频数据进行预处理;根据关节点信息构建空间超图;根据关节点信息构建时间超图;使用超图神经网络对所述空间超图和所述时间超图进行特征学习;提取超图所表示的高阶信息,进行人体动作的行为识别。本发明通过对相同时刻不同视角下的人体骨骼点构建空间超图,以捕获多个身体骨骼点之间的空间依赖关系;通过对相同视角不同帧下的人体骨骼点构建时间超图,更好地获取特定关节点不同视角下特征之间的时间相关性,从而根据空间超图和时间超图构建的特征进行时空超图神经网络进行学习,最终实现基于超图学习的多视角人体行为识别。