公开(公告)号：CN117994293A

公开(公告)日：2024-05-07

申请号：CN202410141948.2

申请日：2024-02-01

Applicant: 南京信息工程大学

Inventor： 陈凤姣 ,  程旭

IPC: G06T7/246 ,  G06V10/62 ,  G06V10/80 ,  G06V10/764 ,  G06V10/82 ,  G06V10/766 ,  G06V10/74 ,  G06N3/0464 ,  G06N3/0455

Abstract: 本发明公开了一种基于相似图相融合的目标跟踪方法，包括：S1：截取视频序列中一帧裁剪成模板分支和搜索分支输入大小；S2：两个相同参数的深度卷积网络ResNet‑50提取输入图像对的特征信息，选取ResNet‑50最后三个残差块的输出作为后续跟踪的特征信息；S3：聚合三个残差块的模板特征和搜索特征，输出三张不同层次的相似图；S4：不同层次的相似图输入特征融合模块，交互融合多层相似图，输出响应图；S5：预测头对融合模块输出的响应图进行卷积处理，输出分类分支、回归分支和中心分支三种特征图；S6：根据预测头的输出结果对目标进行定位。本发明可以提取多层相似图之间的全局上下文信息，关注不同层次的特征信息，提高跟踪器的跟踪性能。