公开(公告)号：CN118537222A

公开(公告)日：2024-08-23

申请号：CN202410624875.2

申请日：2024-05-20

Applicant: 南京大学

Inventor： 武港山 ,  赵浩林 ,  唐杰

IPC: G06T3/4053 ,  G06T3/4046 ,  G06V20/40 ,  H04N21/2343 ,  H04N21/4402 ,  G06V10/44 ,  G06V10/82 ,  G06N3/0442 ,  G06N3/045 ,  G06N3/084 ,  G06N3/0464

Abstract: 基于重要性检测和窗口匹配的视频超分辨率方法，构建一个视频超分辨率重构网络，由基于局部特征重要性检测的特征提取模块提取视频帧特征并提升对重要区域的关注；采用基于两步窗口相似度匹配策略的特征对齐模块，根据较大窗口的特征进行跨帧窗口全局匹配实现空间对齐，再在匹配窗口内进行细粒度注意力操作对齐特征；再由特征聚合模块将对齐之后的特征与当前帧特征进行融合，辅助当前帧细节信息恢复；最后上采样模块将聚合的信息以高分辨率形式呈现，得到与高分辨率视频同等大小的视频帧。本发明能够在较小的参数量下，有效处理较大运动带来的对齐困难问题，同时提升对重要细节的表示能力，能灵活适用于不同的应用场景。