公开(公告)号：CN118781331B

公开(公告)日：2024-12-27

申请号：CN202411259450.2

申请日：2024-09-10

Applicant: 湖南大学

Inventor： 卢婷 ,  席一帆 ,  付巍 ,  孙斌 ,  李树涛

IPC: G06V10/25 ,  G06N3/084 ,  G06N3/096 ,  G06V10/40 ,  G06V10/774 ,  G06V10/778 ,  G06V10/80 ,  G06V10/82

Abstract: 本发明公开了一种基于知识蒸馏的跨模态图像旋转目标识别方法及系统，本发明包括构建和训练以红外模态图像与可见光模态图像作为输入的教师网络模型，以可见光模态图像/红外模态图像作为输入的学生网络模型，利用可见光模态图像的样本训练学生网络模型，将可见光模态图像及其对应的红外模态图像的样本输入教师网络模型，利用教师网络模型中的多模态主干网、多尺度聚合层中提取的特征进行知识蒸馏并计算特征和关系蒸馏损失来训练优化学生网络模型的网络参数，直至完成对学生网络模型的训练以用于对输入的可见光模态图像进行旋转目标识别。本发明旨提高学生网络模型的检测精度，同时兼具跨模态检测功能。

公开(公告)号：CN118781331A

公开(公告)日：2024-10-15

申请号：CN202411259450.2

申请日：2024-09-10

Applicant: 湖南大学

Inventor： 卢婷 ,  席一帆 ,  付巍 ,  孙斌 ,  李树涛

IPC: G06V10/25 ,  G06N3/084 ,  G06N3/096 ,  G06V10/40 ,  G06V10/774 ,  G06V10/778 ,  G06V10/80 ,  G06V10/82

Abstract: 本发明公开了一种基于知识蒸馏的跨模态图像旋转目标识别方法及系统，本发明包括构建和训练以红外模态图像与可见光模态图像作为输入的教师网络模型，以可见光模态图像/红外模态图像作为输入的学生网络模型，利用可见光模态图像的样本训练学生网络模型，将可见光模态图像及其对应的红外模态图像的样本输入教师网络模型，利用教师网络模型中的多模态主干网、多尺度聚合层中提取的特征进行知识蒸馏并计算特征和关系蒸馏损失来训练优化学生网络模型的网络参数，直至完成对学生网络模型的训练以用于对输入的可见光模态图像进行旋转目标识别。本发明旨提高学生网络模型的检测精度，同时兼具跨模态检测功能。

公开(公告)号：CN117475323A

公开(公告)日：2024-01-30

申请号：CN202311510422.9

申请日：2023-11-13

Applicant: 湖南大学

Inventor： 李树涛 ,  席一帆 ,  卢婷 ,  付巍

IPC: G06V20/13 ,  G06V10/22 ,  G06V10/26 ,  G06V10/40 ,  G06V10/764

Abstract: 本发明公开了一种多尺度多方向遥感目标识别方法、系统及介质，本发明方法包括将遥感图像切分成图像块，将图像块输入网络模型进行目标识别，包括：通过主干网对输入的图像块提取特征；通过多尺度聚合模块通过多尺度聚合得到聚合特征；通过检测头对聚合特征提取方向敏感特征送入定位分支和分类分支，在定位分支实现锚框、不确定度和交并比回归，在分类分支提取方向不变特征再进行分类，并基于类别预测得到的得分、不确定度预测结果、交并比预测结果构建的质量评价函数对筛选最佳的锚框。本发明旨在针对遥感图像类间目标和类内目标都存在尺度差异大和目标朝向任意的问题，实现对多尺度、多方向目标的精确检测。