一种基于混合专家的可见光-红外语义分割方法

    公开(公告)号:CN119380016A

    公开(公告)日:2025-01-28

    申请号:CN202411415991.X

    申请日:2024-10-11

    Applicant: 浙江大学

    Inventor: 王辰旭 龚小谨

    Abstract: 本发明公开了一种基于混合专家的可见光‑红外语义分割方法。本发明建立了基于混合专家的神经网络模型,能够有效地融合可见光和红外特征,从而得到更为精确的分割结果。本发明提出了一种带有通道注意力的路由选择器,能够自适应地为不同的可见光‑红外图像对选择合适的专家网络,从而提高了模型在应对不同场景时的泛化性能。此外,本发明设计的基于混合专家的特征融合模块具有稀疏性,在提高模型表达能力的同时只增加了少量的计算开销,在模型的效果和推理速度之间取得了较好的平衡。实验结果证明,本发明在广泛使用的MFNet数据集上达到了先进的性能。

Patent Agency Ranking