公开(公告)号：CN115620393A

公开(公告)日：2023-01-17

申请号：CN202211260738.2

申请日：2022-10-14

Applicant: 长安大学

Inventor： 阎莹 ,  冯成成 ,  袁华智 ,  李杰 ,  田振鼎 ,  周墨 ,  张宇 ,  茅天一

IPC: G06V40/20 ,  G06V10/764 ,  G06V10/82

Abstract: 本公开提供了一种面向自动驾驶的细粒度行人行为识别方法及系统，属于自动驾驶与计算机视觉技术领域，包括连续采集路口的视频数据，构建行人数据集；对行人行为数据集进行行人检测和人体关键点信息提取，获取多部位骨架姿态数据，并基于2D骨架关键点沿时间序列堆叠生成3D人体热图体积；对视频帧进行采集并进行不同维度的三维卷积，基于人体骨骼关节沿时间维度堆叠热图表示人体姿势特征，通过3D残差级联CBAM机制提取时空特征，在残差层中引入自注意力模块获取时间空间的特征相关性，输出对行人过街的行为动作分类，使得自动驾驶系统系统具有识别复杂行人行为从而理解行人意图的能力。