-
公开(公告)号:CN116630156A
公开(公告)日:2023-08-22
申请号:CN202310531034.2
申请日:2023-05-11
Applicant: 南京大学
IPC: G06T3/40 , G06N3/0464 , G06N3/048 , G06N3/08
Abstract: 基于环绕式注意力机制的视频超分辨率重构方法、设备及介质,构建一个视频超分辨率重构器,首先使用特征提取网络提取视频中每一帧图像的浅层特征;其次,将提取出的浅层特征分别以顺序和逆序的方式循环输入环绕式注意力对齐模块,以对齐每帧的特征及其邻帧的特征,再通过特征融合网络实现时序互补信息融合;最终,融合后的各帧特征通过上采样网络转化为具有更高分辨率的图像残差,叠加双线性插值后的原始图像,重构出具有更多细节的高分辨率视频。本发明所设计的环绕式注意力机制,能够简化视频超分辨率重构的流程,有效提高重构器的性能,并使其适用于重构运动量较大的视频输入。