本发明涉及一种基于骨骼运动图的动作识别方法，包括：将人体骨骼序列的每一帧分别投影到笛卡尔正交系的三个平面上，生成人体骨骼序列分布图，用来获取空间信息；使用时间金字塔方法将骨骼序列分布图分割为不同分段的两层结构，用来获取运动的时间信息；对每个面的分段的骨骼序列分布图分别累积每个关节上连续帧之间的绝对差，生成分段的骨骼运动图；对分段的骨骼运动图使用四个不同的颜色表分别进行伪彩色编码，获得更多的彩色纹理信息，得到彩色分段的骨骼运动图；使用加法更新策略，将彩色分段的骨骼运动图叠加生成最终的骨骼运动图；利用深度学习进行图片分类，从而完成人类的动作检测识别任务。