基于孪生RPN的异源匹配方法

    公开(公告)号:CN112802056A

    公开(公告)日:2021-05-14

    申请号:CN202011209060.6

    申请日:2020-11-03

    Abstract: 本发明公开了一种基于孪生RPN的异源匹配方法,实现在可见光图中选择感兴趣的区域后,能够在红外光图中自动将该区域选中。通过将孪生神经网络与候选区域网络串联,使用孪生神经网络提取目标特征,将目标特征输入到RPN网络中,区分前景和背景并选定目标位置。把第一帧可见光图的锚点框包含内容视为检测的样例,在红外光图里面检测与它相似的目标。本发明通过该网络可利用“图片对”进行端到端的离线训练。将在线跟踪任务转换为一次检测任务,而不是使用低效费时的多尺度测试,在保证准确率的同时,达到了较高的速度,实现了红外光图和可见光图的异源匹配。

Patent Agency Ranking