一种基于注意力机制的多源多尺度图像融合方法与装置
摘要:
本发明属于计算机视觉技术领域,具体公开提供的一种基于注意力机制的多源多尺度图像融合方法与装置。该方法包括:导入不同尺度下收集待融合的图像,并进行预处理,组合成多源图像对;提取多源图像对的全局特征提取;搭建多尺度图像融合网络结构;设置目标掩膜,进行全局特征信息进行标注;设置训练损失函数;进行多源图像对的图像融合训练,并输出融合图像;本发明有效解决了当前场景适应不足的问题,提高了全局特征表示的能力。此外,通过全局特征标注,提高融合图像中红外图像中重要信息的保留比例和可见光图像中背景纹理的保留比例,并且在掩模的基础上设计了内容损失来指导特征提取,实现更好的多源图像融合。
0/0