公开(公告)号：CN115170810B

公开(公告)日：2022-12-13

申请号：CN202211095330.4

申请日：2022-09-08

Applicant: 南京理工大学

Inventor： 任侃 ,  赵俊逸 ,  钱惟贤 ,  顾国华 ,  陈钱

IPC: G06V10/26 ,  G06V10/774 ,  G06V10/82 ,  G06T5/50

Abstract: 本发明提出了一种可见光红外图像融合目标检测实例分割方法，将红外图像与可见光图像配准，对红外图像与可见光光图像中的相同目标进行标定，依据标定结果对红外图像进行平移、缩放，得到红外配准图像；使用yolov5神经网络在红外配准图像中提取目标位置坐标；使用mask_rcnn神经网络在红外配准图像中提取mask掩膜；依据目标位置坐标确定融合范围，采用ADF图像融合方法对可见光图像与红外配准图像进行融合；对融合图像赋予伪彩色，并使用mask掩膜进行实例分割。本发明对于背景部分保留了可见光大视场的优势，对于目标部分结合了红外恶劣环境可见度高，以及可见光空间细节的优势。

公开(公告)号：CN115170810A

公开(公告)日：2022-10-11

申请号：CN202211095330.4

申请日：2022-09-08

Applicant: 南京理工大学

Inventor： 任侃 ,  赵俊逸 ,  钱惟贤 ,  顾国华 ,  陈钱

IPC: G06V10/26 ,  G06V10/774 ,  G06V10/82 ,  G06T5/50

Abstract: 本发明提出了一种可见光红外图像融合目标检测实例分割方法，将红外图像与可见光图像配准，对红外图像与可见光光图像中的相同目标进行标定，依据标定结果对红外图像进行平移、缩放，得到红外配准图像；使用yolov5神经网络在红外配准图像中提取目标位置坐标；使用mask_rcnn神经网络在红外配准图像中提取mask掩膜；依据目标位置坐标确定融合范围，采用ADF图像融合方法对可见光图像与红外配准图像进行融合；对融合图像赋予伪彩色，并使用mask掩膜进行实例分割。本发明对于背景部分保留了可见光大视场的优势，对于目标部分结合了红外恶劣环境可见度高，以及可见光空间细节的优势。