公开(公告)号：CN115294029A

公开(公告)日：2022-11-04

申请号：CN202210807480.7

申请日：2022-07-11

Applicant: 华南农业大学

Inventor： 王金凤 ,  龚浩强 ,  黄帅辉 ,  郑志燊 ,  姜发健

IPC: G06T7/00 ,  G06T7/30 ,  G06V10/764 ,  G06V10/774 ,  G06V10/80 ,  G06V10/82 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明涉及医学图像处理领域和深度学习领域，为一种面向多模态图像的脑部病灶区域定位系统和方法，该系统包括自适应多模态patch生长与剪枝模块、基于双注意力机制的多模态patch多层次融合模块和全局卷积网络分类器模块，通过自适应多模态patch生长与剪枝模块在多模态图像中自适应地选择和修建patch，来识别具有高鉴别性的patch位置；通过一种基于双注意力机制的多模态patch融合模块，来获取多模态patch的潜在表示形式，结合patch多层次的表示形式，基于数据驱动的方式将其进行融合和共同学习；通过全局卷积网络分类器模块作为最终分类模型，进一步获取数据的更深层表示，提取更多的潜在信息。本发明提出的系统能有效地识别与疾病高度相关的病灶区域，可以辅助诊断。