公开(公告)号：CN118052709A

公开(公告)日：2024-05-17

申请号：CN202410162529.7

申请日：2024-02-05

Applicant: 北京理工大学珠海学院

Inventor： 杨会战 ,  王科俊 ,  张小凤 ,  苏秉华 ,  王闪 ,  司炜

IPC: G06T3/4053 ,  G06V10/80 ,  G06V10/764 ,  G06V10/74 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/08

Abstract: 本发明公开一种基于预训练深度神经网络的单输入高分辨率红外图像真彩转换方法及系统，包括：将高分辨率红外图像和目标域可见光图像单输入到真彩转换模型中；将预先训练的DINO‑ViT模型作为外部语义先验，通过深层注意力模块中键向量的自相似性来表示结构，通过CLS令牌表示全局外观；通过让生成器生成的可见光图像与目标域可见光图像的CLS令牌相匹配，使可见光图像和目标域可见光图像在外观上相一致；通过减小转换前后图像中键向量的自相似性差异，使可见光图像和输入的红外图像在空间结构上相一致，完成高分辨率红外图像真彩转换。本发明达到实现高分辨率红外图像的真彩转换，提高红外图像彩色化效果，并拓宽应用场景的目的。

公开(公告)号：CN118097241A

公开(公告)日：2024-05-28

申请号：CN202410162530.X

申请日：2024-02-05

Applicant: 北京理工大学珠海学院

Inventor： 杨会战 ,  王科俊 ,  张小凤 ,  苏秉华 ,  王闪 ,  方宇杰

IPC: G06V10/764 ,  G06T3/4053 ,  G06V10/762 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/0475 ,  G06N3/088

Abstract: 本发明公开了一种基于残差注意力网络和对比学习的红外图像真彩转换方法及系统，包括：将红外成像设备采集到的红外图像输入到红外图像真彩转换网络，利用基于空间和通道注意力的残差注意力模块捕捉输入的红外图像的空间特征，以及将不同特征之间进行混合和整合；利用通道注意力模块使信息量较大的通道得到更多的重视，利用空间注意力模块通过聚类每个位置的特征以增强网络的表示能力；通过生成器根据输入的红外图像重建出对应的可见光图像；利用多尺度判别器将生成的可见光图像分成若干小块，并针对每个小块进行真实性评估，并在通过评估后进行输出。本发明达到降低模型的复杂性并提高收敛性、扩大研究场景以及实现高分辨红外图像真彩转换的目的。