公开(公告)号：CN112560760B

公开(公告)日：2023-03-10

申请号：CN202011550924.0

申请日：2020-12-24

Applicant: 上海交通大学

Inventor： 马汝辉 ,  刘俊男 ,  宋涛 ,  华扬 ,  管海兵

IPC: G06V20/40 ,  G06V10/82 ,  G06V10/774 ,  G06V10/74 ,  G06F16/738

Abstract: 本发明公开了一种注意力辅助的无监督视频摘要系统。本发明涉及深度学习，计算机视觉，视频分析等领域，所述系统包括挖掘视频帧长时依赖关系的全局自注意力模块，以无监督的方式学习视频帧表征的生成对抗网络模块。本发明在基于深度神经网络的视频摘要任务基础上实现了无监督的训练方式，从而减少了人工大规模标注数据的成本，克服部分网络需要预训练、模型参数过大过多等问题，提升了视频摘要模型的性能。

公开(公告)号：CN112560760A

公开(公告)日：2021-03-26

申请号：CN202011550924.0

申请日：2020-12-24

Applicant: 上海交通大学

Inventor： 马汝辉 ,  刘俊男 ,  宋涛 ,  华扬 ,  管海兵

IPC: G06K9/00 ,  G06F16/738 ,  G06K9/62 ,  G06N3/08

Abstract: 本发明公开了一种注意力辅助的无监督视频摘要系统。本发明涉及深度学习，计算机视觉，视频分析等领域，所述系统包括挖掘视频帧长时依赖关系的全局自注意力模块，以无监督的方式学习视频帧表征的生成对抗网络模块。本发明在基于深度神经网络的视频摘要任务基础上实现了无监督的训练方式，从而减少了人工大规模标注数据的成本，克服部分网络需要预训练、模型参数过大过多等问题，提升了视频摘要模型的性能。