公开(公告)号：CN113076947A

公开(公告)日：2021-07-06

申请号：CN202110324087.8

申请日：2021-03-26

Applicant: 东北大学

Inventor： 宋克臣 ,  王杰 ,  鲍彦奇 ,  颜云辉 ,  李骏 ,  黄黎明

IPC: G06K9/32 ,  G06K9/34 ,  G06K9/62

Abstract: 一种交叉引导融合的RGB‑T图像显著性检测系统，属于计算机视觉图像检测技术领域。特征提取模块提取彩色和热红外图像的特征，三级解码块中的每个模块由以两个模态信息各自为主要引导的两部分所组成，每一部分独有一个引导融合(GFM)模块，同时交叉共有跨级增强(CLE)模块和全局辅助增强(GAE)模块。GFM通过使用单一模态信息为主要引导，另一模态信息辅助增强，实现对单一模态信息的深入挖掘和跨模态信息的充分融合。CLE使用前一级引导融合后的特征来增强当前级的信息，GAE是对逐级引导好的信息进一步整合，同时，在最后一级解码块产生最后的显著性图。该系统可深入挖掘两模态信息，更好地融合两模态特征，提高显著性检测效果。

公开(公告)号：CN113076947B

公开(公告)日：2023-09-01

申请号：CN202110324087.8

申请日：2021-03-26

Applicant: 东北大学

Inventor： 宋克臣 ,  王杰 ,  鲍彦奇 ,  颜云辉 ,  李骏 ,  黄黎明

IPC: G06V10/25 ,  G06V10/26 ,  G06V10/80 ,  G06V10/764

Abstract: 一种交叉引导融合的RGB‑T图像显著性检测系统，属于计算机视觉图像检测技术领域。特征提取模块提取彩色和热红外图像的特征，三级解码块中的每个模块由以两个模态信息各自为主要引导的两部分所组成，每一部分独有一个引导融合(GFM)模块，同时交叉共有跨级增强(CLE)模块和全局辅助增强(GAE)模块。GFM通过使用单一模态信息为主要引导，另一模态信息辅助增强，实现对单一模态信息的深入挖掘和跨模态信息的充分融合。CLE使用前一级引导融合后的特征来增强当前级的信息，GAE是对逐级引导好的信息进一步整合，同时，在最后一级解码块产生最后的显著性图。该系统可深入挖掘两模态信息，更好地融合两模态特征，提高显著性检测效果。