公开(公告)号：CN119338680A

公开(公告)日：2025-01-21

申请号：CN202411482048.0

申请日：2024-10-23

Applicant: 南京大学

Inventor： 苏丰 ,  庄泽明 ,  李明骏 ,  许朔

IPC: G06T3/4053 ,  G06V30/18 ,  G06V30/19 ,  G06T3/4046 ,  G06N3/047 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/0442

Abstract: 本发明公开一种融合文本边缘、分割和语义特征的文本图像超分辨率增强方法、电子设备及存储介质。文本图像超分辨率增强方法包括以下步骤：获取低分辨率输入文本图像的边缘特征、分割特征、语义特征及文本图像特征；将边缘特征、分割特征、语义特征及文本图像特征进行融合处理，得到高分辨率文本图像。本发明通过引入视觉‑语义提示生成器，将文本图像的边缘特征和分割特征分别与语义特征融合，生成两种互补的文本视觉‑语义提示引导文本图像的重建。引入多提示重建模块及跨模态注意力机制，将两种文本视觉‑语义提示中的信息与文本图像特征进行融合与增强。增强后的文本图像特征经自适应融合模块和像素上采样处理后得到超分辨率增强后的文本图像。