一种RGB-D图像显著性目标检测方法

    公开(公告)号:CN111583173A

    公开(公告)日:2020-08-25

    申请号:CN202010199264.X

    申请日:2020-03-20

    Abstract: 本发明涉及一种RGB-D图像显著性目标检测方法,包括如下步骤:1、从VGG主干网络中提取自顶向下的RGB-D特征,然后将RGB-D特征送入跟每个层级相对应的跨模态调制与选择单元;2、通过跨模态特征调制模块对多级RGB-D特征进行调制;3、通过自适应特征选择模块得到与显著性相关的特征;通过显著显著性边缘预测部分生成显著性边缘图;4、求得修正特征;5、利用修正特征通过显著性图预测部分进行显著性图预测,并以第1层级输出的显著性图作为网络的最终输出显著性结果。本发明能够充分挖掘跨模态数据之间的互补信息,获得更具判别力的特征表达,生成更加完整、准确、边缘清晰的显著性图,且具有较强的背景抑制能力。

    一种RGB-D图像显著性目标获取的方法

    公开(公告)号:CN111242238A

    公开(公告)日:2020-06-05

    申请号:CN202010070635.4

    申请日:2020-01-21

    Abstract: 本发明提供一种RGB-D图像显著性目标获取的方法,提出一种交织融合网络,用于相互指导RGB-D特征的联合提取,并通过网络浅层和深层结构密集地整合跨模态的互补信息,这样能自动且充分地抓取潜在的有用信息,并减少由于跨模态数据的不一致性引起的干扰。与单独提取RGB-D特征后将其整合方式相比,RGB-D特征的交互引导有利于促进跨模态信息的互补性融合,缓解不同模态中的不一致问题;还可以降低因为成像环境或设备引起的低质深度图带来的负面影响。通过在损失函数构造时引入对抗损失项,为RGB-D显著性目标检测提供全局语义约束,使检测结果不仅关注像素级显著性属性,还能捕获对象级的全局语义特征,生成具有完整结构、清晰边界的显著性图。

    一种RGB-D图像显著性目标获取的方法

    公开(公告)号:CN111242238B

    公开(公告)日:2023-12-26

    申请号:CN202010070635.4

    申请日:2020-01-21

    Abstract: 本发明提供一种RGB‑D图像显著性目标获取的方法,提出一种交织融合网络,用于相互指导RGB‑D特征的联合提取,并通过网络浅层和深层结构密集地整合跨模态的互补信息,这样能自动且充分地抓取潜在的有用信息,并减少由于跨模态数据的不一致性引起的干扰。与单独提取RGB‑D特征后将其整合方式相比,RGB‑D特征的交互引导有利于促进跨模态信息的互补性融合,缓解不同模态中的不一致问题;还可以降低因为成像环境或设备引起的低质深度图带来的负面影响。通过在损失函数构造时引入对抗损失项,为RGB‑D显著性目标检测提供全局语义约束,使检测结果不仅关注像素级显著性属性,还能捕获对象级的全局语义特征,生成具有完整结构、清晰边界的显著性图。

    一种RGB-D图像显著性目标检测方法

    公开(公告)号:CN111583173B

    公开(公告)日:2023-12-01

    申请号:CN202010199264.X

    申请日:2020-03-20

    Abstract: 本发明涉及一种RGB‑D图像显著性目标检测方法,包括如下步骤:1、从VGG主干网络中提取自顶向下的RGB‑D特征,然后将RGB‑D特征送入跟每个层级相对应的跨模态调制与选择单元;2、通过跨模态特征调制模块对多级RGB‑D特征进行调制;3、通过自适应特征选择模块得到与显著性相关的特征;通过显著显著性边缘预测部分生成显著性边缘图;4、求得修正特征;5、利用修正特征通过显著性图预测部分进行显著性图预测,并以第1层级输出的显著性图作为网络的最终输出显著性结果。本发明能够充分挖掘跨模态数据之间的互补信息,获得更具判别力的特征表达,生成更加完整、准确、边缘清晰的显著性图,且具有较强的背景抑制能力。

Patent Agency Ranking