基于子动作单元感知的开集弱监督时序动作检测方法

    公开(公告)号:CN119920009A

    公开(公告)日:2025-05-02

    申请号:CN202510001893.X

    申请日:2025-01-02

    Abstract: 本发明涉及视频动作检测技术领域,尤其涉及基于子动作单元感知的开集弱监督时序动作检测方法,包括进行嵌入特征提取;预测嵌入特征的片段级别类激活序列;计算交叉熵损失函数;计算基线分支中的总损失函数;构建子动作单元与已知动作类别之间的关系、子动作单元与视频不同时刻片段的时序关系;将每个子动作单元上的激活值作为关系表达进行基于子动作单元的动作语义关系表达和时序关系表达建模,计算基于子动作单元的动作分类损失和DTW损失;计算两个分支一致性损失函数;计算表征损失和平衡损失函数;构建基线分支和子动作单元分支的总损失函数。本发明解决现有方法在检测动作类别为非固定和不同时,存在检测性能有待进一步提升的问题。

Patent Agency Ranking