一种基于差分模态特征融合模块的轻量化双模态目标检测方法

    公开(公告)号:CN118470482A

    公开(公告)日:2024-08-09

    申请号:CN202410634279.2

    申请日:2024-05-21

    Applicant: 福州大学

    Abstract: 本发明涉及一种基于差分模态特征融合模块的轻量化双模态目标检测方法。提出一种基于差分模态特征融合模块的轻量化双模态目标检测模型,包括:双流特征提取网络、差分模态特征融合模块和照明感知模块。其中,双流特征提取网络采用Mobilenetv2轻量级网络;差分模态特征融合模块根据放大电路的原理,在保留原始特征的同时根据差异特征进行补偿,以达到增强模态信息的目的;照明感知模块将可见光图像输入,输出反映图像明亮概率的权值,能够自适应的调整在恶劣环境情况下的各模态权重占比,提升模型检测精度。本发明可以将双模态目标检测模型部署在边缘设备上,在模型复杂度更低、参数量更小的条件下有着比其他轻量级模型更高的检测精度。

Patent Agency Ranking