公开(公告)号：CN116597937A

公开(公告)日：2023-08-15

申请号：CN202310591735.5

申请日：2023-05-24

Applicant: 上海交通大学医学院附属第九人民医院

Inventor： 周慧芳 ,  夏多金 ,  宋雪霏 ,  张海扬 ,  李熠星 ,  屈佳璐 ,  王皓汉

IPC: G16H20/10 ,  G16H50/20 ,  G06T7/00 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08

Abstract: 本申请提供一种利用深度学习结合影像组学预测糖皮质激素治疗TAO的方法，包括将收集的眼部医学影像进行预处理；将经过预处理的眼部医学影像分别输入深度学习特征识别网络和影像组学特征识别网络得到识别结果；将深度学习特征识别结果和影像组学特征识别结果进行融合得到融合结果；根据融合结果输出预测结果。本申请通过构建由主干网络ResNet‑50、影像组学分支网络，以及动态MLP网络组成的RDINet网络，对眼部MRI图像进行处理，并得到静脉注射糖皮质激素(IVGC)疗法治疗甲状腺相关眼病是否有效的预测结果，从而辅助指导甲状腺相关眼病患者选择合适的治疗方案，使得对糖皮质激素治疗有效的患者都能得到相应治疗，同时避免无效使用糖皮质激素带来的副作用。

公开(公告)号：CN116309456A

公开(公告)日：2023-06-23

申请号：CN202310274446.2

申请日：2023-03-20

Applicant: 上海交通大学医学院附属第九人民医院

Inventor： 宋雪霏 ,  姜梦达 ,  张海扬 ,  陈铠之 ,  张慧杰 ,  许嘉烁 ,  夏多金 ,  周慧芳

IPC: G06T7/00 ,  G06V10/80 ,  G06V10/44 ,  G06V10/25 ,  G06V10/82 ,  G06N3/08 ,  G06N3/0464

Abstract: 本发明的一个技术方案是提供了一种多模态特征融合方法，其特征在于，将同一个患者的影像深度学习特征featureDL、多个影像手工特征记以及患者临床特征featureclinic进行融合后得到最终的融合特征。本发明的另一个技术方案是提供了一种上述的多模态特征融合方法的应用，其特征在于，应用在治疗效果预测中。本发明以卷积神经网络为基础，作为图像特征提取的主干网络提取得到图像深度学习特征，与此同时，本发明引入不同ROI区域的手工图像特征以及患者临床特征。本发明端到端地融合图像深度学习特征、手工图像特征以及患者临床特征，形成不同模态数据的相同交叉。采用本发明所得到的融合后的特征进行分类判别，可以得到更为准确的预测结果。