公开(公告)号：CN115512272A

公开(公告)日：2022-12-23

申请号：CN202211223332.7

申请日：2022-10-08

Applicant: 哈尔滨工业大学 ,  黑龙江广播电视台

Inventor： 姚鸿勋 ,  王力凝 ,  岳晓光 ,  杨浩森 ,  侯云峰 ,  李莹 ,  张秀丽

IPC: G06V20/40 ,  G06V10/764 ,  G06V10/74 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种针对多事件实例视频的时序事件检测方法，所述方法包括如下步骤：一、获取视频数据；二、构建视频特征提取模型；三：使用视频特征提取模型进行特征提取，得到视频帧特征向量组；四：对视频帧特征向量所对应的标注文件进行修正，得到帧级标注与片段级标注；五：构建事件边界预测模型；六：构建多实例判别模型；七：构建视频片段交互模型；八：训练事件边界预测模型、多实例判别模型和视频片段交互模型，得到联合模型；九：调用联合模型对视频进行目标事件检测。本发明通过视频特征建模以及对比学习策略提升了时序事件检测的准确性，解决了当前复杂视频场景(多实例问题)易误判、漏判问题，能够大幅度地提高时序事件检测的性能。