基于三通道卷积神经网络的单幅图像超分辨率重建方法

    公开(公告)号:CN111640067A

    公开(公告)日:2020-09-08

    申请号:CN202010523197.2

    申请日:2020-06-10

    Applicant: 华侨大学

    Inventor: 陈剑涛 黄德天

    Abstract: 本发明提供了图像处理领域的一种基于三通道卷积神经网络的单幅图像超分辨率重建方法,包括如下步骤:步骤S10、获取图像的数据集,并基于所述数据集创建复数张高分辨率图像以及高分辨率图像所对应的低分辨率图像;步骤S20、创建三通道卷积神经网络模型,并利用所述三通道卷积神经网络模型对各高分辨率图像和低分辨率图像进行训练,并生成低分辨率图像与高分辨率图像的映射关系;步骤S30、利用均方误差损失函数对所述映射关系进行优化;步骤S40、基于优化后的所述映射关系,将待重建的低分辨率图像输入所述三通道卷积神经网络模型,输出重建后的高分辨率图像。本发明的优点在于:实现不增加网络深度和模型参数的前提下,极大的提升了重建图像的质量。

    基于深浅层时空特征的屏幕内容视频质量评价方法及装置

    公开(公告)号:CN120031869A

    公开(公告)日:2025-05-23

    申请号:CN202510495985.8

    申请日:2025-04-21

    Applicant: 华侨大学

    Abstract: 本发明公开了基于深浅层时空特征的屏幕内容视频质量评价方法及装置,涉及视频评价领域,方法包括:获取屏幕内容视频并从中提取视频块和关键帧,构建包含空间特征提取支路、时间特征提取支路、空域时域融合模块和质量回归模块的双支路屏幕内容视频质量评价模型;通过将关键帧输入空间特征提取支路获得空间特征,视频块输入时间特征提取支路获得时间特征,两者拼接后经由空域时域融合模块整合,最终通过质量回归模块输出视频质量分数。本发明通过构建并训练包含空间和时间特征提取支路的双支路屏幕内容视频质量评价模型,实现了对屏幕内容视频质量的有效评估。

    掩模与语义协同优化扩散模型的石材表面瑕疵检测方法

    公开(公告)号:CN119477922A

    公开(公告)日:2025-02-18

    申请号:CN202510067481.6

    申请日:2025-01-16

    Applicant: 华侨大学

    Abstract: 本发明提供掩模与语义协同优化扩散模型的石材表面瑕疵检测方法,属于瑕疵检测领域,包括:获取数据集;将输入图片输入编码器以得到输入表征,对输入表征进行高斯噪声向前扩散得到全噪声表征;将各输入表征与掩模图片点乘后输入掩模引导的知识提炼网络以生成掩模表征;将输入表征输入含多维特征金字塔的语义引导增强网络以得到语义表征;将全噪声表征、掩膜表征和语义表征进行拼接后,进行反向扩散以逐步去除噪声,并解码生成重建图片;将输入图片及其对应的重建图片均输入特征提取网络,进而计算得到异常得分;根据异常得分进行排序并形成异常得分列表,将异常得分列表对应的输入图片的热力图反馈至用户。本发明能够有效提升对瑕疵的检测精度。

    基于稳定扩散模型的快速人脸图像超分辨率方法及系统

    公开(公告)号:CN119006292B

    公开(公告)日:2025-02-14

    申请号:CN202411484614.1

    申请日:2024-10-23

    Applicant: 华侨大学

    Abstract: 本发明公开了一种基于稳定扩散模型的快速人脸图像超分辨率方法及系统,涉及图像超分辨技术领域,方法包括以下步骤:构建基于稳定扩散模型的人脸图像超分辨率模型,包括稳定扩散模型、引导提取模块和引导注入模块,引导提取模块根据输入的人脸低分辨率图像生成视觉引导和文本引导,引导注入模块将视觉引导和文本引导注入到稳定扩散模型,稳定扩散模型基于视觉引导和文本引导生成复原图像作为人脸高分辨率图像;对人脸图像超分辨率模型进行训练;利用训练好的人脸图像超分辨率模型实现快速人脸图像超分辨率。本发明结合视觉引导和文本引导来微调稳定扩散模型,不仅可以大幅提升人脸图像的真实性并保持相当的一致性,并且加快了复原速度。

    一种基于稳定扩散的真实世界图像超分辨率方法

    公开(公告)号:CN118918009A

    公开(公告)日:2024-11-08

    申请号:CN202411413946.0

    申请日:2024-10-11

    Applicant: 华侨大学

    Abstract: 本发明公开了一种基于稳定扩散的真实世界图像超分辨率方法,涉及图像超分辨率技术领域,具体通过构建并训练增强先验引导扩散模型实现;所述增强先验引导扩散模型实现真实世界图像超分辨率的过程为:预处理模块根据低分辨率图像生成预处理图像,分割模块根据预处理图像生成对应的分割掩码图像,注意力融合模块根据预处理图像和分割掩码图像的潜在特征生成融合潜在特征;语义提示提取器从预处理图像提取高质量语义提示词输入去噪主干网络;控制网络基于融合潜在特征对去噪主干网络进行特征调制;去噪主干网络输出高分辨率图像。本发明在真实世界图像超分辨率任务上更注重图像高频细节和结构层次,保证了复原图像的真实性与一致性。

    一种基于流形约束扩散模型的人脸图像复原方法及系统

    公开(公告)号:CN118247180B

    公开(公告)日:2024-09-24

    申请号:CN202410661695.1

    申请日:2024-05-27

    Applicant: 华侨大学

    Abstract: 本发明设计图像修复技术领域,公开了一种基于流形约束扩散模型的人脸图像复原方法及系统,方法包括以下步骤:S1,制作数据集并利用数据集预训练一个基础扩散模型;S2,构建受流形约束启发的额外校正项并添加到基础扩散模型,构建语义扩散引导统一框架并添加到基础扩散模型,获得人脸图像复原模型;S3,输入待复原人脸图像和引导信息到人脸图像复原模型,生成复原人脸图像。本发明基于扩散概率模型(DDPM)反向生成过程设计了一个受流形约束(Manifold Constrained)启发的额外校正项并引入语义扩散引导(Semantic Diffusion Guidance)框架控制生成过程,与之前的求解器协同使用,综合考虑了复原图像的正确性、真实性、一致性问题。

    一种基于扩散生成模型的快速人脸图像复原方法及系统

    公开(公告)号:CN118279178B

    公开(公告)日:2024-09-13

    申请号:CN202410675877.4

    申请日:2024-05-29

    Applicant: 华侨大学

    Abstract: 本发明公开了一种基于扩散生成模型的快速人脸图像复原方法及系统,涉及图像复原领域,方法包括以下步骤:制作数据集与选择预训练模型,以获得预训练扩散生成模型;基于预训练扩散生成模型获得快速人脸图像复原模型;利用快速人脸图像复原模型实现对于失真人脸图像的快速复原;所述基于预训练扩散生成模型获得快速人脸图像复原模型,包括:在预训练扩散生成模型的前向加噪模块中添加普罗米修斯随机微分方程,以及在预训练扩散生成模型的反向去噪模块中添加条件引导投影。本发明不仅可以实现复原图像真实性与一致性的保障,而且能大幅度缩短图像复原所需要的时间。

    一种基于稀疏再聚焦的高分辨率人脸图像重建方法

    公开(公告)号:CN117671135A

    公开(公告)日:2024-03-08

    申请号:CN202311512308.X

    申请日:2023-11-14

    Applicant: 华侨大学

    Abstract: 本发明公开了一种基于稀疏再聚焦的高分辨率人脸图像重建方法,涉及图像处理技术领域,包括:利用卷积核为3×3的第一卷积层提取输入的低分辨率人脸图像的浅层特征;基于三个依次连接的组件特征提取网络提取组件特征;其中,第一个组件特征提取网络的输入与第一卷积层的输出相连接;基于三个依次连接的组件生成模块生成高分辨率组件图;其中,每个组件生成模块的输入与一个组件特征提取网络的输出相连接;利用逐像素相加合并高分辨率组件图,生成重建的高分辨率人脸图像。本发明能够有效抑制冗余特征并强调关键特征,实现高效的特征提取;根据图像组件的复杂度分而治之地重建组件并合并,能够降低高频细节的重建难度并复原高分辨率人脸图像。

    基于全距离特征聚合的单帧图像超分辨率方法及系统

    公开(公告)号:CN117218005A

    公开(公告)日:2023-12-12

    申请号:CN202311476526.2

    申请日:2023-11-08

    Applicant: 华侨大学

    Abstract: 本发明涉及图像超分辨率的技术领域,公开了一种基于全距离特征聚合的单帧图像超分辨率方法及系统,包括以下步骤:利用通道上采样卷积层,将输入的低分辨率图像转换为通道数为C的浅层特征图;对浅层特征图进行短距离、中距离和长距离的特征提取,并聚合成为全距离特征图;利用基于亚像素卷积的通道下采样卷积层,将全距离特征图的通道数由C下采样至输入的低分辨率图像的通道数。本发明提供的超分辨率方法克服了原有经典超分辨率模型提取的特征信息尺度单一的问题,充分利用多尺度特征信息以复原精细的细节,同时抑制冗余噪声对图像重建的干扰。

Patent Agency Ranking