公开(公告)号：CN117496320A

公开(公告)日：2024-02-02

申请号：CN202311476895.1

申请日：2023-11-07

申请人： 中国人民解放军空军特色医学中心

发明人： 杜鹏 ,  吴伟超 ,  白霜 ,  王若永 ,  李峰 ,  陈曦蒙 ,  景洪江 ,  穆慧玲 ,  王亚雯 ,  张莉莉 ,  郝一铭 ,  刘鹏 ,  桑源

IPC分类号： G06V10/80 ,  G06V10/62 ,  G06V10/77 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/08 ,  G06V20/40

摘要： 本发明提供一种用于视频的特征融合提取方法及设备，该方法包括：将所述视频的连续多帧图像组成的特征图按通道维度分为两组；对两组特征图分别在空间维度和时序维度上采用通道激励的方法进行特征提取，得到空间特征图和时序特征图；将所述空间特征图和时序特征图进行特征融合，提取得到所述视频的包含空间特征和时序特征的特征图。本发明解决了现有技术中的用于视频的特征提取方法忽略了空间和时序维度之间的互动，导致识别效果差、效率低的问题。

公开(公告)号：CN117496405A

公开(公告)日：2024-02-02

申请号：CN202311473804.9

申请日：2023-11-07

申请人： 中国人民解放军空军特色医学中心

发明人： 杜鹏 ,  吴伟超 ,  王亚雯 ,  王若永 ,  陈曦蒙 ,  张樱樱 ,  李峰 ,  景洪江 ,  穆慧玲 ,  白霜 ,  张莉莉 ,  郝一铭 ,  刘鹏 ,  桑源

IPC分类号： G06V20/40 ,  G06V40/20 ,  G06V10/62 ,  G06V10/764 ,  G06V10/77 ,  G06V10/774 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/08

摘要： 本发明提供一种基于时空通道激励的视频动作识别方法及设备，该方法包括：构建视频动作数据集，所述数据集中包括视频片段和视频动作类别；构建视频动作识别模型，所述视频动作识别模型包括时空通道激励模块，用于对待识别的视频在空间维度和时序维度上采用通道激励的方法进行特征提取，得到包含空间特征和时序特征的特征图；基于所述视频动作数据集，通过损失函数对所述视频动作识别模型进行迭代训练；将待识别的视频输入训练后的所述视频动作识别模型，得到动作识别结果。本发明解决了现有技术中的视频动作识别方法忽略了空间和时序维度之间的互动，导致识别效果差、效率低的问题。