一种基于CNN-Transformer并行融合方法

    公开(公告)号:CN116051945A

    公开(公告)日:2023-05-02

    申请号:CN202310041351.6

    申请日:2023-01-13

    Applicant: 常州大学

    Abstract: 本发明涉及图像处理技术领域,尤其涉及一种基于CNN‑Transformer并行融合方法,包括:通过PCTNet网络的编码器提取待分割的医学图像特征,PaFusion‑encoder由两个分支组成;CNN分支感受野逐渐增大,特征编码从局部到全局;Transformer分支,采用全局自注意力与CNN分支中同等分辨率大小的特征图组成的并行融合模块,最大限度地保留了局部特征和全局特征。本发明通过充分挖掘CNN和Transformer各自的优点,提出基于医学图像分割的CNN和Transformer并行融合网络,进而整合图像中粗粒度和细粒度信息。

    一种基于深度学习的2D医学图像分割方法

    公开(公告)号:CN118823352A

    公开(公告)日:2024-10-22

    申请号:CN202411030316.5

    申请日:2024-07-30

    Applicant: 常州大学

    Abstract: 本发明涉及图像分割技术领域,尤其涉及一种基于深度学习的2D医学图像分割方法,包括采集医学图像数据集;构建CNN分支和Transformer分支,利用CNN分支提取局部特征,利用Transformer分支提取全局特征;构建CAF模块,将局部特征和全局特征输入CAF模块中进行第一特征融合;在残差块中引入深度可分离卷积,将第一特征融合与Hadamard积进行第二特征融合;利用上采样、和跳跃连接融合不同层级的第二特征融合,得到融合后的图像特征;将第一层图像特征与解码第三上采样进行残差连接,再通过上采样得到分割结果。本发明解决现有CNN和Transformer特征融合时存在信息丢失问题。

    基于CNN与Transformer的四轴向融合方法

    公开(公告)号:CN116188928A

    公开(公告)日:2023-05-30

    申请号:CN202310102092.3

    申请日:2023-02-07

    Applicant: 常州大学

    Abstract: 本发明涉及图像处理技术领域,尤其涉及基于CNN与Transformer的四轴向融合方法,包括将医学图像分割数据集剪裁,并转成RGB格式;通过CNN分支编码器和Transformer分支编码器提取图像特征,并通过四轴向融合模块将CNN分支编码器和Transformer分支编码器的图像特征进行融合并输出特征图;将输出特征图送入解码器进行还原。本发明结合了CNN和Transformer的优势,使用CNN缓解Transformer局部性的不足,使用Transformer缓解CNN全局性的不足;采用四轴融合方法不仅关注更多方向的区域,更有利于病灶边缘的分割,而且大大减少了计算量,从而提高了分割性能。

Patent Agency Ranking