公开(公告)号：CN112435165B

公开(公告)日：2023-08-04

申请号：CN202011335855.1

申请日：2020-11-25

Applicant: 哈尔滨工业大学(深圳)

Inventor： 吴爱国 ,  方仕奇 ,  侯明哲

IPC: G06T3/40 ,  G06N3/0475 ,  G06N3/094

Abstract: 本发明公开了基于生成对抗网络的两阶段视频超分辨率重建方法，包括用于生成高清帧的SR生成器和用于对SR生成器进行对抗训练的判别器；SR生成器生成高清帧的流程分为两个阶段(第一阶段和第二阶段)，在第一阶段中，通过对多个时间连续的低分辨率帧进行对齐和融合重建出当前时刻的参考帧对应的高分辨率帧，然后送往第二个阶段；在第二个阶段中，输入不仅为上一个阶段生成的高分辨率帧，还加上前一时刻的参考帧对应的高分辨率重建帧，然后将这两帧进行对齐和融合，生成最终的高清帧。本发明充分利用了前后帧与生成帧之间的空间与时间上的关联信息，在确保SR图像更接近原始图像的同时，具有网络结构简单、重建流程简洁的优点，大幅提高了重建的效率。

公开(公告)号：CN112435165A

公开(公告)日：2021-03-02

申请号：CN202011335855.1

申请日：2020-11-25

Applicant: 哈尔滨工业大学(深圳)

Inventor： 吴爱国 ,  方仕奇 ,  侯明哲

IPC: G06T3/40 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了基于生成对抗网络的两阶段视频超分辨率重建方法，包括用于生成高清帧的SR生成器和用于对SR生成器进行对抗训练的判别器；SR生成器生成高清帧的流程分为两个阶段(第一阶段和第二阶段)，在第一阶段中，通过对多个时间连续的低分辨率帧进行对齐和融合重建出当前时刻的参考帧对应的高分辨率帧，然后送往第二个阶段；在第二个阶段中，输入不仅为上一个阶段生成的高分辨率帧，还加上前一时刻的参考帧对应的高分辨率重建帧，然后将这两帧进行对齐和融合，生成最终的高清帧。本发明充分利用了前后帧与生成帧之间的空间与时间上的关联信息，在确保SR图像更接近原始图像的同时，具有网络结构简单、重建流程简洁的优点，大幅提高了重建的效率。