公开(公告)号：CN118736536A

公开(公告)日：2024-10-01

申请号：CN202410730294.7

申请日：2024-06-06

Applicant: 济南大学

Inventor： 杨晓晖 ,  法书翔 ,  徐涛 ,  司统振

IPC: G06V20/59 ,  G06V40/20 ,  G06V40/10 ,  G06V10/44 ,  G06V10/80 ,  G06V10/82 ,  G06N3/042

Abstract: 本发明公开了基于外观姿态融合网络的分心驾驶行为识别方法及系统，其中方法，包括：训练后的外观姿态融合网络，用于基于人体姿态估计算法对驾驶行为视频数据进行处理，得到驾驶员上半身的关节坐标，根据所述关节坐标得到骨骼数据；将关节坐标输入到第一图卷积网络中，得到关节特征；将骨骼数据，输入到第二图卷积网络中，得到骨骼特征；将驾驶行为视频数据，输入到混合卷积网络中，得到外观特征；将关节特征和骨骼特征进行融合得到一级融合特征；将一级融合特征与外观特征进行融合得到二级融合特征；对二级融合特征进行分类，得到驾驶行为识别结果。