公开(公告)号：CN114972038A

公开(公告)日：2022-08-30

申请号：CN202210699194.3

申请日：2022-06-20

Applicant: 中国科学院自动化研究所 ,  北京三星通信技术研究有限公司

Inventor： 谭铁牛 ,  王亮 ,  黄岩 ,  罗正雄 ,  刘子坤 ,  张建兴

IPC: G06T3/40 ,  G06T5/20 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明属于模式识别与机器学习领域，具体涉及了一种基于相关性动态滤波的端到端多帧超分辨方法及系统，旨在解决现有多帧超分辨依赖光流场信息进行多帧图像的空间对齐，计算复杂、超分辨效果达不到预期的问题。本发明包括：通过特征提取器提取不同图像帧的特征，计算目标帧每个像素点与支撑帧上对应点周围像素点的特征之间的相关性，获得目标帧和每一个支撑帧的特征之间的相关性矩阵；通过滤波器计算每一个支撑帧的特征的滤波核，并进行对应的支撑帧的动态滤波；通过解码器融合目标帧和滤波后的支撑帧的特征，获得超分辨图像。本发明不依赖光流场信息进行多帧图像的空间对齐，更加轻量和稳定，可以以较小的参数量和计算量取得更优的性能。

公开(公告)号：CN114972038B

公开(公告)日：2024-09-03

申请号：CN202210699194.3

申请日：2022-06-20

Applicant: 中国科学院自动化研究所 ,  北京三星通信技术研究有限公司

Inventor： 谭铁牛 ,  王亮 ,  黄岩 ,  罗正雄 ,  刘子坤 ,  张建兴

IPC: G06T3/4053 ,  G06T3/4046 ,  G06T5/20 ,  G06N3/0464 ,  G06N3/084 ,  G06N3/09 ,  G06N3/0985

Abstract: 本发明属于模式识别与机器学习领域，具体涉及了一种基于相关性动态滤波的端到端多帧超分辨方法及系统，旨在解决现有多帧超分辨依赖光流场信息进行多帧图像的空间对齐，计算复杂、超分辨效果达不到预期的问题。本发明包括：通过特征提取器提取不同图像帧的特征，计算目标帧每个像素点与支撑帧上对应点周围像素点的特征之间的相关性，获得目标帧和每一个支撑帧的特征之间的相关性矩阵；通过滤波器计算每一个支撑帧的特征的滤波核，并进行对应的支撑帧的动态滤波；通过解码器融合目标帧和滤波后的支撑帧的特征，获得超分辨图像。本发明不依赖光流场信息进行多帧图像的空间对齐，更加轻量和稳定，可以以较小的参数量和计算量取得更优的性能。