公开(公告)号：CN117789294A

公开(公告)日：2024-03-29

申请号：CN202311744217.9

申请日：2023-12-18

Applicant: 西南交通大学

Inventor： 吴晓 ,  张铭宣 ,  袁召全 ,  李威 ,  胡东风 ,  何廷全

IPC: G06V40/20 ,  G06V20/40 ,  G06V10/764 ,  G06V10/77 ,  G06V10/80 ,  G06V10/42 ,  G06V10/44 ,  G06V10/62 ,  G06N3/0455

Abstract: 本发明公开了一种基于场景图信息精炼与压缩的人物物交互动作检测方法，包括S1：获取待检测视频，提取待检测视频的帧图像数据；S2：根据帧图像数据，利用场景图生成算法，生成场景图结构，获取场景图特征；S3：基于场景图特征进行双分支人物物交互特征提取；S4：基于场景图特征进行长期时空特征提取；S5：根据得到的两个分支的特征以及提取的长期时空特征，进行特征融合操作，并输入到分类器中进行分类。本发明通过双分支人物物交互动作检测，提高了在交互物体被遮挡时人物物交互行为检测的准确率。

公开(公告)号：CN115984966B

公开(公告)日：2023-10-13

申请号：CN202310005121.4

申请日：2023-01-03

Applicant: 西南交通大学

Inventor： 张铭宣 ,  吴晓 ,  袁召全

IPC: G06V40/20 ,  G06V20/40 ,  G06V10/62 ,  G06V10/764 ,  G06V10/80 ,  G06V10/82 ,  G06N3/049 ,  G06N3/0464

Abstract: 本发明提供了一种基于特征精炼与多视图的人物物交互动作检测方法，包括S1：对待检测的视频帧进行实体时序特征提取，获取实体时序特征；S2：对实体时序特征进行精练，获得精练后的实体时序特征；S3：基于精炼的实体时序特征，获取以人为中心的交互动作建模模型；S4：采用以人为中心的交互动作建模模型，构建和融合多组多视图人物物交互动作特征，获得人物物交互动作分类特征；S5：通过动作分类器对人物物交互动作进行分类。提高了时序特征表征的准确性，增强了人物物交互动作表征的鲁棒性并且解决了视频流中人物物交互动作检测的问题。

公开(公告)号：CN115984966A

公开(公告)日：2023-04-18

申请号：CN202310005121.4

申请日：2023-01-03

Applicant: 西南交通大学

Inventor： 张铭宣 ,  吴晓 ,  袁召全

IPC: G06V40/20 ,  G06V20/40 ,  G06V10/62 ,  G06V10/764 ,  G06V10/80 ,  G06V10/82 ,  G06N3/049 ,  G06N3/0464

Abstract: 本发明提供了一种基于特征精炼与多视图的人物物交互动作检测方法，包括S1：对待检测的视频帧进行实体时序特征提取，获取实体时序特征；S2：对实体时序特征进行精练，获得精练后的实体时序特征；S3：基于精炼的实体时序特征，获取以人为中心的交互动作建模模型；S4：采用以人为中心的交互动作建模模型，构建和融合多组多视图人物物交互动作特征，获得人物物交互动作分类特征；S5：通过动作分类器对人物物交互动作进行分类。提高了时序特征表征的准确性，增强了人物物交互动作表征的鲁棒性并且解决了视频流中人物物交互动作检测的问题。