基于视图交互聚合的矢量地图构建方法和系统

    公开(公告)号:CN119478876A

    公开(公告)日:2025-02-18

    申请号:CN202411690133.6

    申请日:2024-11-25

    Applicant: 湖南大学

    Abstract: 本发明涉及基于视图交互聚合的矢量地图构建方法和系统,获取可见光图像,分别提取可见光图像在像素级坐标系和摄像机坐标系下的特征,通过异步互学习融合模块得到融合特征;融合特征通过关键点预选取模块,得到深度实例特征和几何位置特征,并作为初始参考点;以融合特征,和基于关键点预选取模块得到的关键点查询与实例查询,作为目标检测算法的输入,得到的初始参考点作为目标检测算法额外的提示特征,得到预测的矢量地图元素标签以及所在的位置;预测的矢量地图元素标签以及所在的位置形成单帧的矢量地图,将历史帧中的丰富特征信息与当前帧中的稀疏特征进行聚合,以增强当前帧的稀疏特征,进一步通过检测头得到矢量地图。

    基于红外-可见光图像对的非配准多模态融合的实时目标检测方法

    公开(公告)号:CN119048731A

    公开(公告)日:2024-11-29

    申请号:CN202411050121.7

    申请日:2024-08-01

    Applicant: 湖南大学

    Abstract: 本发明提供一种基于红外‑可见光图像对的非配准跨模态特征交互学习网络的融合检测方法。通过从FLIR数据集与LLVIP数据集选取红外‑可见光图像对进行数据预处理;构建特征提取网络,将预处理后的红外‑可见光图像对输入特征提取网络获取图像特征;构建非配准跨模态特征交互学习网络NRCMFINet,输入图像特征进行训练提取增强特征;构建特征增强拼接模块ESM,输入增强特征进行运算得到多尺度融合特征;最终输出多尺度融合特征。本发明为特征增强拼接模块ESM设计了空间和通道注意力机制,可再次增强NRCMFINet中得到的增强特征,从而带来性能改进,解决多光谱车辆检测数据中弱对齐图像对中的位置移动问题。

Patent Agency Ranking