公开(公告)号：CN114998989A

公开(公告)日：2022-09-02

申请号：CN202210579421.9

申请日：2022-05-25

Applicant: 杭州电子科技大学

Inventor： 朱素果 ,  汪利娟 ,  俞俊 ,  范建平

IPC: G06V40/20 ,  G06V10/40 ,  G06V10/74 ,  G06V10/82 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种基于动态实例交互头的稀疏时序动作检测方法。本发明使用基于查询的方法，初始化N个提案特征和提案框，解决了锚框的复杂性问题。本发明还引入了基于时序特征金字塔的动态实例交互头模块，使用时序特征金字塔可以对不同尺度的行为都能进行较好的预测，解决由于每个行为时间跨度不同对实验结果造成的影响；动态实例交互头模块仅仅将提案特征与局部特征进行稀疏交互，就可以很好的学习有价值的信息，大大减少了计算量。最后，使用基于集合预测损失的最佳二分匹配，可以一对一的进行标签匹配，而且最后仅仅输出与初始提案框相等数量的N个候选框，在计算性能之前不用使用非极大值抑制后处理，可以直接作为预测框进行输出。