公开(公告)号：CN118675030A

公开(公告)日：2024-09-20

申请号：CN202410821561.1

申请日：2024-06-24

Applicant: 中国航天空气动力技术研究院 ,  北京邮电大学

Inventor： 禹旻 ,  黄智濒 ,  陈思员 ,  洪艺宾 ,  郭逸驰 ,  黄天量

IPC: G06V10/82 ,  G06N3/0442 ,  G06N3/0455 ,  G06N3/08 ,  G06V10/74

Abstract: 本发明提供了一种混合专家目标检测系统及方法，其中，系统包括：门控神经网络以及多专家融合系统，门控神经网络包括：编码器、解码器以及路由器；编码器用于将输入的图像以及图像中的提示文本进行编码，获取图像‑文本模态融合向量；解码器用于对图像‑文本模态融合向量进行解码，获取场景语义信息向量，路由器用于根据场景语义信息向量获取最优专家模型；多专家融合系统用于根据最优专家模型调用相应的模型对所述图像进行目标检测。本发明基于场景语义指导多个专家模型协同工作，实现可根据场景需要调用其专家的混合专家目标检测范式，解决传统目标检测适用场景单一的问题。