公开(公告)号：CN117710678A

公开(公告)日：2024-03-15

申请号：CN202311814465.6

申请日：2023-12-27

Applicant: 中国科学院上海微系统与信息技术研究所

Inventor： 李嘉茂 ,  黄心阳 ,  张广慧 ,  朱冬晨 ,  王磊

IPC: G06V10/26 ,  G06V20/70 ,  G06V10/25 ,  G06V10/82 ,  G06V10/52 ,  G06T5/50 ,  G06N3/0464 ,  G06N3/045 ,  G06N3/0442 ,  G06N3/09

Abstract: 本发明涉及一种基于语义‑实例‑全景关联约束的全景分割方法，包括：接收待全景分割的图片；将待全景分割的图片输入至全景分割模型，得到全景分割结果；其中，全景分割模型包括：特征提取部分，用于对输入的图片进行多尺度的特征提取，得到语义多尺度特征和实例多尺度特征；门控编码模块，用于通过双向信息交互增强语义多尺度特征和实例多尺度特征，得到强化语义多尺度特征和强化实例多尺度特征；语义头模块，用于对强化语义多尺度特征进行预测，得到语义预测结果；实例头模块，用于对强化实例多尺度特征进行预测，得到实例预测结果；融合模块，用于将语义预测结果和实例预测结果进行融合得到全景分割结果。本发明提高了分割精度与效率。