公开(公告)号：CN115272069A

公开(公告)日：2022-11-01

申请号：CN202210729711.7

申请日：2022-06-24

Applicant: 厦门大学

Inventor： 董继扬 ,  先后松 ,  郭磊 ,  朱晋宇

IPC: G06T3/40 ,  G01N27/64 ,  G06T7/30

Abstract: 一种H&E染色显微图像驱动的质谱成像超分辨重构方法，涉及图像处理。将MSI原始数据进行谱峰对齐、谱峰提取、归一化、基线校正和压缩降维等预处理，得到MSI的离子图像数据和降维数据；基于深度神经网络构建超分辨重构模型；将高分辨H&E显微图像和MSI降维数据作为输入，让模型自动配准和自监督学习，实现MSI降维数据的超分辨重构；利用迁移学习实现MSI离子图像的超分辨重构。利用MSI降维数据的超分辨图像对H&E图像进行迭代配准，避免由于单离子图像信息量少、信噪比低和空间分辨率低等因素造成H&E图像的矫正误差；将H&E染色显微图像替换为其它模态的高分辨医学图像，可实现其它模态驱动的质谱成像超分辨重构。

公开(公告)号：CN119323519A

公开(公告)日：2025-01-17

申请号：CN202411349381.4

申请日：2024-09-26

Applicant: 厦门大学

Inventor： 董继扬 ,  朱宇涛 ,  先后松 ,  郭磊 ,  许晶晶

IPC: G06T3/4076 ,  G06T7/00 ,  G06T7/33 ,  G06T3/02 ,  G16H30/20 ,  G06V10/80

Abstract: 本发明公开了一种基于标签传播网络的质谱成像空间超分辨重构方法及系统，方法包括：对MSI数据进行预处理，得到MSI数据的低维表示；将低维表示与H&E染色图像进行配准；对H&E染色图像进行空间分割得到多个图像块，为每一个图像块构建一个标签传播网络；将MSI数据作为网络中匹配节点的标签，并沿网络传播，同时更新网络节点的标签；将节点标签与基于统计的特征进行融合，构建回归模型计算各超像素的特征，实现MSI的空间超分辨重构。本发明在MSI中融合了H&E图像的结构信息，并通过局部的仿射变换配准实现全局的多模态配准，将H&E染色显微图像替换为其它模态的高分辨率医学图像，可以实现其它模态驱动的质谱成像超分辨重构，提高MSI空间分辨率。