基于可分离卷积网络的山水画图像超分辨率重建方法

    公开(公告)号:CN117333359A

    公开(公告)日:2024-01-02

    申请号:CN202311156435.0

    申请日:2023-09-08

    Applicant: 西北大学

    Abstract: 本申请公开了一种基于可分离卷积网络的山水画图像超分辨率重建方法,包括建立山水画的原始图像数据集,并对其进行预选处理,得到预训练图像数据集和测试图像数据集;对预训练图像数据集进行一阶退化处理和二阶退化处理,得到待重建图像数据集;将待重建图像数据集在超分辨率山水画图像模型重建器内进行卷积、超分重建山水画的预训练,得到预训练参数,通过该参数对超分辨率山水画图像模型进行调整,所述预训练中采用对抗损失函数配合训练;将测试图像数据集中输入经过调整后的超分辨率山水画图像模型上进行重建,得到超分辨率山水画图像。本方法重建后的山水画中人物、植物以及建筑物等细节复原的效果更好、真实感更高、视觉体验更加自然。

    一种细粒度的文字生成山水画模型构建方法

    公开(公告)号:CN118470143A

    公开(公告)日:2024-08-09

    申请号:CN202410389081.2

    申请日:2024-04-01

    Applicant: 西北大学

    Abstract: 本发明属于计算机视觉技术领域,尤其涉及一种细粒度的文字生成山水画模型构建方法,通过大语言模型自动构建原始数据集,对原始数据集进行人工标注,对标注后的原始数据集进行预处理得到山水画图文数据集;山水画图文数据集包括图像及与每张图像对应的细粒度文本信息,所述细粒度文本信息包括:历史文化信息、画面内容描述、画作蕴含情感信息和中国传统诗歌,将细粒度文本信息的文本特征向量按照特定顺序注入预训练模型的不同交叉注意力层中,使用LoRA对预训练模型进行微调,控制扩散过程,得到一种细粒度文字生成山水画模型;本发明模型可生成更符合传统中国山水画风格且在表达画作蕴含情感信息方面具有优势的画作。

Patent Agency Ranking