公开(公告)号：CN117409475A

公开(公告)日：2024-01-16

申请号：CN202311342521.0

申请日：2023-10-17

Applicant: 杭州电子科技大学

Inventor： 郑博仑 ,  黄崇浩 ,  梁立军 ,  黄爱爱 ,  颜成钢

IPC: G06V40/20 ,  G06V20/52 ,  G06V10/774 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/084

Abstract: 本发明公开了一种基于骨骼的3D‑CNN动作识别方法。首先构建基于骨骼的3D‑CNN动作识别网络，包含姿态提取器模块、3D热图体生成模块和动作识别模块；其中姿态提取器模块对视频序列进行目标检测和姿态估计，生成关节信息元组；3D热图体生成模块根据关节信息元组，生成一个3D的热图体；动作识别模块用于对3D热图体进行识别，输出最终的动作结果；最后对网络进行训练，经过训练的网络接收需要进行动作识别的视频，完成动作识别。本发明在健壮性、互操作性上得到提升，通过在3D‑CNN网络模型中添加注意力模块，使网络模型在训练的过程中能注意到不同的特征，从而实现更好的识别动作效果。