一种基于深度学习和姿态估计的舞蹈动作评价系统

    公开(公告)号:CN113516005B

    公开(公告)日:2024-02-09

    申请号:CN202110341970.8

    申请日:2021-03-30

    Abstract: 本发明公开了一种基于深度学习和姿态估计的舞蹈动作评价系统,该系统包括数据采集单元、VideoPose3D关节点坐标提取模块、动作分析神经网络舞蹈编码模块和舞蹈评价模块。通过数据采集单元拍摄舞蹈视频,传送到关节点坐标提取模块中提取关节点坐标数据信息,然后通过动作分析神经网络对坐标数据进行编码,最后由舞蹈评价模块对比该编码与标准动作编码的余弦相似度,将计算结果转化为评价指标,完成对舞蹈动作的评价。在动作分析神经网络的训练过程中,使用MMD_NCA损失作为网络的约束指标,降低了网络编码结果的误差,提高舞蹈评价模块评价结果的准确性与可靠性。该系统可以实现对舞蹈动作的教学与矫正,有效提高舞者的舞蹈水平。

    一种基于深度学习和姿态估计的舞蹈动作评价系统

    公开(公告)号:CN113516005A

    公开(公告)日:2021-10-19

    申请号:CN202110341970.8

    申请日:2021-03-30

    Abstract: 本发明公开了一种基于深度学习和姿态估计的舞蹈动作评价系统,该系统包括数据采集单元、VideoPose3D关节点坐标提取模块、动作分析神经网络舞蹈编码模块和舞蹈评价模块。通过数据采集单元拍摄舞蹈视频,传送到关节点坐标提取模块中提取关节点坐标数据信息,然后通过动作分析神经网络对坐标数据进行编码,最后由舞蹈评价模块对比该编码与标准动作编码的余弦相似度,将计算结果转化为评价指标,完成对舞蹈动作的评价。在动作分析神经网络的训练过程中,使用MMD_NCA损失作为网络的约束指标,降低了网络编码结果的误差,提高舞蹈评价模块评价结果的准确性与可靠性。该系统可以实现对舞蹈动作的教学与矫正,有效提高舞者的舞蹈水平。

    一种基于图像和雷达数据的舞台交互系统

    公开(公告)号:CN112598742A

    公开(公告)日:2021-04-02

    申请号:CN202011609683.2

    申请日:2020-12-30

    Inventor: 吴子朝 陈豪 张成

    Abstract: 本发明公开了一种基于图像和雷达数据的舞台交互系统,包括信息采集模块、处理模块和控制模块。所述信息采集模块包括安装在舞台正前方的一台RGB摄影机和一台LiDAR激光雷达,实时探测舞台上表演者的姿态信息,作为生产姿态的训练数据或现场数据;处理模块包括姿态生成和姿态识别,姿态生成单元利用双流深度学习网络学习训练数据,产生表演者的姿态模型;姿态识别根据表演者的姿态模型识别匹配对应的预设姿态,将结果发送到控制模块。控制单元模块根据接收到的识别结果,控制舞台屏幕的显示内容随表演者姿态变化。通过上述方式,本发明能够在较高精度下使表演者可以通过动作姿态与舞台场景实时交互。

    一种监控场景下的轻量化暴力行为识别方法

    公开(公告)号:CN115690907A

    公开(公告)日:2023-02-03

    申请号:CN202211306567.2

    申请日:2022-10-25

    Abstract: 本发明涉及视频分析与行为识别领域,公开了一种监控场景下的轻量化暴力行为识别方法,包括以下步骤:步骤1,获取监控场景下的视频数据,对视频进行预处理和数据增强;步骤2,将步骤1处理得到的数据作为输入,进行数据时空特征的提取;步骤3,对双流特征进行特征融合;步骤4,通过全连接层构成的分类器,进行暴力/非暴力行为的类别判决。本发明解决了视频监控场景下对暴力行为不能进行及时有效识别的问题,在降低模型参数量、计算量的情况下,利用轻量化深度学习网络模型,并结合多种激励模块进一步提高了暴力行为识别的准确率。

    一种基于图像和雷达数据的舞台交互系统

    公开(公告)号:CN112598742B

    公开(公告)日:2025-05-13

    申请号:CN202011609683.2

    申请日:2020-12-30

    Inventor: 吴子朝 陈豪 张成

    Abstract: 本发明公开了一种基于图像和雷达数据的舞台交互系统,包括信息采集模块、处理模块和控制模块。所述信息采集模块包括安装在舞台正前方的一台RGB摄影机和一台LiDAR激光雷达,实时探测舞台上表演者的姿态信息,作为生产姿态的训练数据或现场数据;处理模块包括姿态生成和姿态识别,姿态生成单元利用双流深度学习网络学习训练数据,产生表演者的姿态模型;姿态识别根据表演者的姿态模型识别匹配对应的预设姿态,将结果发送到控制模块。控制单元模块根据接收到的识别结果,控制舞台屏幕的显示内容随表演者姿态变化。通过上述方式,本发明能够在较高精度下使表演者可以通过动作姿态与舞台场景实时交互。

Patent Agency Ranking